Когда проверка статистической значимости нулевой гипотезы непригодна для научных исследований: переоценка

When Null Hypothesis Significance Testing Is Unsuitable for Research: A Reassessment
John P. A. Ioannidis, Dénes Szűcs
2017-08-02

размеры эффектапроверка нулевой гипотезы на статистическую значимостьпредварительная регистрацияпредварительные расчёты мощностикризис воспроизводимости
Проверка статистической значимости нулевой гипотезы (NHST) имеет ряд недостатков, которые, вероятно, способствуют широко обсуждаемому кризису воспроизводимости в (когнитивной) нейронауке, психологии и биомедицинской науке в целом. Мы рассматриваем эти недостатки и предполагаем, что после длительного негативного опыта NHST больше не должна оставаться стандартной и доминирующей статистической практикой во всех биомедицинских и психологических исследованиях. Если теоретические предсказания слабы, не следует полагаться на дихотомические проверки гипотез. Для разных типов исследовательских вопросов могут быть наиболее подходящими различные методы статистического вывода. В тех случаях, когда исследователи используют NHST, они должны обосновывать его применение и публиковать расчёты статистической мощности, выполненные до начала исследования, а также размеры эффектов, включая отрицательные результаты. Исследования, основанные на проверке гипотез, должны быть предварительно зарегистрированы, а в оптимальном случае следует публиковать исходные данные. Современный упрощённый подход к преподаванию статистики студентам, поддерживающий широко распространённое и необоснованное применение NHST, следует постепенно отказаться.
1
После длительного негативного опыта NHST не следует считать статистическим методом по умолчанию во всех биомедицинских и психологических исследованиях.
2
Исследователи, применяющие NHST, должны обосновывать его использование и публиковать априорные расчёты мощности, размеры эффектов и отрицательные результаты.
3
В статье выявлены недостатки проверки нулевой гипотезы, которые могут способствовать кризису воспроизводимости в когнитивной нейронауке, психологии и биомедицинских исследованиях.
4
Статья рекомендует предварительную регистрацию исследований с проверкой гипотез, по возможности публикацию исходных данных и реформу недостаточного статистического образования, поддерживающего ошибочное применение NHST.
5
При слабых теоретических предсказаниях дихотомические проверки гипотез неуместны; метод статистического вывода следует выбирать в зависимости от исследовательского вопроса.

проверка нулевых гипотез (NHST) в биомедицинских исследованиях, психологии и когнитивной нейронауке

недостатки NHST, нецелесообразность его использования по умолчанию, а также рекомендуемые альтернативные методы и практики представления результатов

Publication Details
Publication Date
2017-08-02
Journal
Publisher
ISSN
Cited by
320
Access Type
Author Information
Authors
John P. A. Ioannidis
Dénes Szűcs
Explore further
Open the scid.ai AI chat with a ready-made request: it will find papers on a similar topic and help build a literature review.
Find similar papers in the chat →
Make a presentation
100%