Оценка воспроизводимости психологической науки
Estimating the reproducibility of psychological science
2015-08-27
SCID: 54.1/y8hshzkk
Discuss with AI
психологическая наукарепликационные эффектырепликационные исследованиявоспроизводимостьстатистическая значимость
Figures from the paper
Abstract (AI)
Воспроизводимость является определяющей характеристикой науки, однако степень, в которой она присуща современным исследованиям, неизвестна. Мы провели репликации 100 экспериментальных и корреляционных исследований, опубликованных в трех психологических журналах, используя высокостатистически мощные дизайны и оригинальные материалы, когда они были доступны. Эффекты в репликациях имели вдвое меньшую величину, чем исходные эффекты, что свидетельствует о существенном снижении. В 97% исходных исследований были получены статистически значимые результаты. В 36% репликаций были получены статистически значимые результаты; 47% исходных размеров эффекта находились в пределах 95%-ного доверительного интервала размера эффекта в репликации; по субъективной оценке, в 39% случаев эффект воспроизводил исходный результат; а если предположить отсутствие систематического смещения в исходных результатах, то при объединении исходных результатов и результатов репликаций статистически значимые эффекты сохранялись в 68% случаев. Корреляционный анализ показал, что успех репликации лучше предсказывался силой исходных доказательств, чем характеристиками исходной команды и команды, проводившей репликацию.
Key Findings
1
Хотя 97% исходных исследований сообщали статистически значимые результаты, статистически значимыми оказались лишь 36% репликаций.
2
При объединении исходных и репликационных результатов статистически значимые эффекты сохранялись в 68% исследований при предположении отсутствия смещения исходных результатов.
3
Только 47% исходных размеров эффекта попали в 95%-ные доверительные интервалы репликационных оценок, а 39% эффектов были субъективно признаны воспроизведёнными.
4
Успешность репликации сильнее предсказывалась убедительностью исходных доказательств, чем характеристиками исходных или репликационных исследовательских групп.
5
Репликации 100 психологических исследований показали, что эффекты в среднем были вдвое меньше исходных, что указывает на существенное снижение.
Research Object
Набор из 100 опубликованных экспериментальных и корреляционных исследований по психологии
Research Subject
Воспроизводимость психологических исследований, включая размеры эффектов при репликации, статистическую значимость, успешность репликации и её предикторы
Publication Details
Publication Date
2015-08-27
Journal
Publisher
ISSN
Cited by
8484
Open access PDF
Access Type
Author Information
Download PDF
Subscribe to digest
Источники этой статьи в scid.ai4
Работы, цитирующие эту статью7
Утечка данных и кризис воспроизводимости в науке, основанной на машинном обучении2023
Воспроизводимость, устойчивость и репродуцируемость в психологической науке2021
Почему и как использовать виртуальную реальность для изучения человеческого социального взаимодействия: проблемы освоения новой исследовательской области2018
10 наиболее надежно воспроизведенных результатов в поведенческой генетике2016
Когда проверка статистической значимости нулевой гипотезы непригодна для научных исследований: переоценка2017
За пределами «третьей волны позитивной психологии»: вызовы и возможности для будущих исследований2022
Проблемы воспроизводимости в спортивной науке и науке о физических упражнениях: нарративный обзор отдельных методологических вопросов в данной области2022