多元宇宙样分析：简介及应用.pdfVIP

心理科学进展2023,Vol.31,No.2,196–208©2023中国科学院心理研究所

AdvancesinPsychologicalScience/10.3724/SP.J.1042.2023.00196

·研究方法(ResearchMethod)·

多元宇宙样分析：简介及应用*

黄顺森陈豪杰来枭雄代欣然王耘

(北京师范大学认知神经科学与学习国家重点实验室,北京100875)

摘要选择性分析和报告是造成心理科学研究可重复性危机的一个重要因素。近年来研究者提出用多元宇

宙样分析的方法,囊括多种数据分析策略,减少分析过程中的主观选择性和随意性,并进行稳健性检验以提

高结果的可靠性。以手机使用与手机压力的关系为例,介绍该方法和操作步骤。该方法已在心理学和认知神

经科学等领域得到一定的应用。未来研究应继续发展和完善该方法的统计推断,使之运用到更多的数据类型

和更广的研究领域中。

关键词多元宇宙样分析,可重复性危机,选择性分析,选择性报告,可疑研究操作,手机压力

分类号B841

1背景加剧了可重复性危机(Aartsetal.,2015;Simonsohn

etal.,2020;Steegenetal.,2016)。国内研究者通过

科学研究的可重复性主要有两层含义：一是

分析OSC的研究材料,进一步区分可重复危机产

对同一个数据集,由不同的研究者使用相似的方

生的两大源头(传统统计学体系的局限和人为偏

法对原研究结论进行验证(一般用reproducibility

差)的差异,发现原研究的阳性结果中,真阳性结

表示);二是不同研究者使用相似的方法,收集新

果不到三分之一,相当部分的结果,极有可能是

的数据检验已有研究结果的可靠性(一般用

人为偏差造成的(骆大森,2017),例如p值操纵

replicability表示)(Artneretal.,2020;Noseketal.,

(P-hacking)、研究者自由度(researcherdegreeof

2022)。一直以来,心理科学研究备受可重复性危

freedom)、“小径分叉的花园”(gardenofforking

机的诟病,引发了国内外心理学研究者的广泛关

paths)(GelmanLoken,2014;Simmonsetal.,

注(Aartsetal.,2015;Noseketal.,2022;Pashler

2011;胡传鹏等,2016)。这种人为偏差主要体现

Wagenmakers,2012;Tackettetal.,2019;朱滢,

在研究者设计、分析、发表过程中对变量选择、

2016;胡传鹏等,2016;骆大森,2017)。