Why rankings of biomedical image analysis competitions should be interpreted with care

Biomedical image analysis challenges have increased in the last ten years, but common practices have not been established yet. Here the authors analyze 150 recent challenges and demonstrate that outcome varies based on the metrics used and that limited information reporting hampers reproducibility.

Gespeichert in:
Bibliographische Detailangaben
Hauptverfasser: Maier-Hein, Lena (VerfasserIn) , Eisenmann, Matthias (VerfasserIn) , Reinke, Annika (VerfasserIn) , Onogur, Sinan (VerfasserIn) , Stankovic, Marko (VerfasserIn) , Godau, Patrick (VerfasserIn) , Arbel, Tal (VerfasserIn) , Hrvoje, Bogunovic (VerfasserIn) , Bradley, Andrew P. (VerfasserIn) , Carass, Aaron (VerfasserIn) , Feldmann, Carolin (VerfasserIn) , Frangi, Alejandro F. (VerfasserIn) , Full, Peter M. (VerfasserIn) , van Ginneken, Bram (VerfasserIn) , Hanbury, Allan (VerfasserIn) , Honauer, Katrin (VerfasserIn) , Kozubek, Michal (VerfasserIn) , Landman, Bennett A. (VerfasserIn) , März, Keno (VerfasserIn) , Maier, Oskar (VerfasserIn) , Maier-Hein, Klaus H. (VerfasserIn) , Menze, Bjoern (VerfasserIn) , Müller, Henning (VerfasserIn) , Neher, Peter (VerfasserIn) , Niessen, Wiro (VerfasserIn) , Rajppot, Nasir (VerfasserIn) , Sharp, Gregory C. (VerfasserIn) , Sirinukunwattana, Korsuk (VerfasserIn) , Speidel, Stafanie (VerfasserIn) , Stock, Christian (VerfasserIn) , Stoyanov, Danail (VerfasserIn) , Taha, Abdel Aziz (VerfasserIn) , van der Sommen, Fons (VerfasserIn) , Wang, Ching-Wei (VerfasserIn) , Weber, Marc-André (VerfasserIn) , Zheng, Guoyan (VerfasserIn) , Jannin, Pierre (VerfasserIn) , Kopp-Schneider, Annette (VerfasserIn)
Dokumenttyp: Article (Journal)
Sprache:Englisch
Veröffentlicht: 06 December 2018
In: Nature Communications
Year: 2018, Jahrgang: 9, Pages: 5217
ISSN:2041-1723
DOI:10.1038/s41467-018-07619-7
Online-Zugang:Verlag, Volltext: http://dx.doi.org/10.1038/s41467-018-07619-7
Verlag, Volltext: https://www.nature.com/articles/s41467-018-07619-7
Volltext
Verfasserangaben:Lena Maier-Hein et al.#
Beschreibung
Zusammenfassung:Biomedical image analysis challenges have increased in the last ten years, but common practices have not been established yet. Here the authors analyze 150 recent challenges and demonstrate that outcome varies based on the metrics used and that limited information reporting hampers reproducibility.
Beschreibung:#Lena Maier-Henn, Matthias Eisenmann, Annika Reinke, Sinan Onogur, Marko Stankovic, Patrick Scholz, Tal Arbel, Hrvoje Bogunovic, Andrew P. Bradley, Aaron Carass, Carolin Feldmann, Alejandro F. Frangi, Peter M. Full, Bram van Ginneken, Allan Hanbury, Katrin Honauer, Michal Kozubek, Bennett A. Landman, Keno März, Oskar Maier, Klaus Maier-Hein, Bjoern H. Menze, Henning Müller, Peter F. Neher, Wiro Niessen, Nasir Rajpoot, Gregory C. Sharp, Korsuk Sirinukunwattana, Stefanie Speidel, Christian Stock, Danail Stoyanov, Abdel Aziz Taha, Fons van der Sommen, Ching-Wei Wang, Marc-André Weber, Guoyan Zheng, Pierre Jannin & Annette Kopp-Schneider
Gesehen am 27.02.2019
Beschreibung:Online Resource
ISSN:2041-1723
DOI:10.1038/s41467-018-07619-7