Почему большинство опубликованных результатов исследований являются ложными

Why Most Published Research Findings Are False
John P. A. Ioannidis
2005-08-02

множественное тестированиепредвзятость публикацийрезультаты исследованийстепени свободы исследователямощность исследования
Растет обеспокоенность тем, что большинство современных опубликованных результатов исследований являются ложными. Вероятность истинности научного утверждения может зависеть от статистической мощности и систематической ошибки исследования, количества других исследований по тому же вопросу и, что особенно важно, соотношения истинных и отсутствующих взаимосвязей среди взаимосвязей, изучаемых в каждой научной области. В рамках этого подхода результат исследования с меньшей вероятностью является истинным, если исследования, проводимые в данной области, имеют меньший размер выборки; размеры эффектов меньше; число проверяемых взаимосвязей больше, а их предварительный отбор менее строг; существует большая гибкость в дизайне исследований, определениях, исходах и методах анализа; выше финансовая и иная заинтересованность, а также предвзятость; и если в научной области больше коллективов стремятся получить статистическую значимость. Моделирование показывает, что для большинства дизайнов исследований и условий вероятность ложности научного утверждения выше, чем вероятность его истинности. Более того, во многих современных научных областях заявленные результаты исследований могут зачастую быть лишь точными измерениями господствующей систематической ошибки. В этом эссе я обсуждаю последствия этих проблем для проведения и интерпретации исследований.
1
Во многих научных областях опубликованные результаты могут в основном отражать преобладающую систематическую ошибку, а не точные реальные взаимосвязи.
2
Научные результаты с меньшей вероятностью истинны при малых размерах исследований, малых эффектах, массовом тестировании, гибкости методологии, конфликте интересов и большом числе команд, стремящихся к статистической значимости.
3
Моделирование показывает, что в большинстве дизайнов исследований и условий опубликованное научное утверждение с большей вероятностью ложно, чем истинно.
4
Вероятность истинности научного утверждения зависит от статистической мощности и систематических ошибок исследований, числа исследований и соотношения истинных и нулевых связей в конкретной области.

Опубликованные результаты исследований и научные утверждения в различных научных областях

Вероятность истинности или ложности научных утверждений в зависимости от статистической мощности исследований, систематической ошибки, величины эффекта, множественности и предварительного отбора проверяемых связей, гибкости методологии, конфликта интересов и участия исследовательских групп

Publication Details
Publication Date
2005-08-02
Journal
Publisher
ISSN
Cited by
10790
Access Type
Author Information
Authors
John P. A. Ioannidis
Explore further
Open the scid.ai AI chat with a ready-made request: it will find papers on a similar topic and help build a literature review.
Find similar papers in the chat →
Make a presentation
100%