![]()
認(rèn)知神經(jīng)科學(xué)前沿文獻(xiàn)分享
![]()
基本信息
Title:Investigating the reproducibility of the social and behavioural sciences
發(fā)表時(shí)間:2026-04-01
發(fā)表期刊:Nature
影響因子:48.5
獲取原文:
1. 添加小助手:PSY-Brain-Frontier即可獲取PDF版本
![]()
![]()
研究背景
讀者在閱讀定量研究時(shí),通常默認(rèn)論文報(bào)告的統(tǒng)計(jì)結(jié)果能基于原始數(shù)據(jù)準(zhǔn)確算出。然而,由于代碼錯(cuò)誤或數(shù)據(jù)遺失,許多研究即使使用相同分析方法也無法得出一致結(jié)果。這種“連基礎(chǔ)數(shù)字都無法還原”的現(xiàn)象直接動搖了學(xué)術(shù)信任基礎(chǔ)。以往關(guān)于復(fù)現(xiàn)性的探討多局限于單一學(xué)科,缺乏跨學(xué)科的系統(tǒng)性證據(jù)。為此,本研究系統(tǒng)評估了社會與行為科學(xué)領(lǐng)域在計(jì)算復(fù)現(xiàn)性(computational reproducibility)上的真實(shí)表現(xiàn),并探究了期刊透明度政策對復(fù)現(xiàn)率的影響。
![]()
實(shí)驗(yàn)設(shè)計(jì)與方法邏輯
研究團(tuán)隊(duì)采用分層隨機(jī)抽樣,梳理了2009至2018年間發(fā)表在62本社會與行為科學(xué)期刊上的600篇定量研究論文。
首先評估其原始數(shù)據(jù)和分析代碼的數(shù)據(jù)可得性(data availability)。
隨后,對成功獲取數(shù)據(jù)的143篇論文(含551項(xiàng)核心主張),組織獨(dú)立分析人員使用相同數(shù)據(jù)與方法進(jìn)行復(fù)核。結(jié)果被嚴(yán)格分類為“精確復(fù)現(xiàn)(precise reproducibility,統(tǒng)計(jì)指標(biāo)完全一致)”、“近似復(fù)現(xiàn)(approximate reproducibility,誤差在15%內(nèi)或P值差異不超過0.05)”及“未復(fù)現(xiàn)”。
最后,研究將復(fù)現(xiàn)結(jié)果與學(xué)科領(lǐng)域交叉比對,并探索性分析了期刊數(shù)據(jù)共享政策與復(fù)現(xiàn)成功率的關(guān)聯(lián)。
![]()
核心發(fā)現(xiàn)
發(fā)現(xiàn)一:數(shù)據(jù)不可得是阻礙復(fù)現(xiàn)的最大壁壘
在評估的600篇文獻(xiàn)中,僅有144篇(24.0%)提供了可供復(fù)現(xiàn)的作者數(shù)據(jù)。盡管數(shù)據(jù)與代碼的共享率隨時(shí)間推移呈上升趨勢,但同時(shí)提供數(shù)據(jù)和代碼的完整共享比例并未顯著提高。![]()
Fig. 1 中,作者展示了2009至2018年間數(shù)據(jù)與代碼可得性隨年份變化的趨勢;這張圖直觀反映了共享率的穩(wěn)步提升。發(fā)現(xiàn)二:完整分析材料決定了復(fù)現(xiàn)成功率
當(dāng)數(shù)據(jù)和代碼同時(shí)具備時(shí),研究的復(fù)現(xiàn)成功率較高。在評估的143篇文獻(xiàn)中,當(dāng)數(shù)據(jù)和代碼均可得時(shí),精確復(fù)現(xiàn)率達(dá)77.2%;若僅有數(shù)據(jù),該比例降至43.2%;而需要從源頭重建數(shù)據(jù)時(shí),精確復(fù)現(xiàn)率僅為11.0%。![]()
Fig. 3 中,作者展示了不同數(shù)據(jù)與代碼可得性條件下的復(fù)現(xiàn)率統(tǒng)計(jì);這張圖明確揭示了完整分析材料對復(fù)現(xiàn)成功的決定性作用,也對應(yīng)了“發(fā)現(xiàn)二”。發(fā)現(xiàn)三:學(xué)科差異與期刊共享政策密切相關(guān)
政治學(xué)(54.1%)和經(jīng)濟(jì)學(xué)(37.3%)的數(shù)據(jù)可得性顯著高于其他社會科學(xué)領(lǐng)域(14.5%)。探索性分析表明,要求數(shù)據(jù)共享、代碼共享或進(jìn)行復(fù)現(xiàn)審查的期刊,其發(fā)表文獻(xiàn)的精確復(fù)現(xiàn)率更高。![]()
![]()
Fig. 2 和 Fig. 6 中,作者分別展示了各學(xué)科數(shù)據(jù)與代碼可得性對比,以及2003至2025年各期刊共享政策的演變;這兩張圖提示了嚴(yán)格的透明度政策可能是提升復(fù)現(xiàn)表現(xiàn)的關(guān)鍵驅(qū)動力。
![]()
省流總結(jié)
本研究證實(shí),原始數(shù)據(jù)與代碼缺失是社會科學(xué)定量研究難以被獨(dú)立驗(yàn)證的核心痛點(diǎn),而嚴(yán)格的期刊透明度政策能顯著提升計(jì)算復(fù)現(xiàn)率。需注意,成功復(fù)現(xiàn)僅代表計(jì)算無誤,不等于研究設(shè)計(jì)有效或結(jié)論絕對正確,且該結(jié)論不可直接外推至高度依賴濕實(shí)驗(yàn)的其他學(xué)科。
分享人:天天
審核:PsyBrain 腦心前沿編輯部
你好,這里是「PsyBrain 腦心前沿」
專注追蹤全球認(rèn)知神經(jīng)科學(xué)的最尖端突破
視野直擊 Nature, Science, Cell 正刊 及核心子刊與頂級大刊
每日速遞「深度解讀」與「前沿快訊」
科研是一場探索未知的長跑,但你無需獨(dú)行。歡迎加入PsyBrain 學(xué)術(shù)社群,和一群懂你的同行,共同丈量腦與心智的無垠前沿。
點(diǎn)擊卡片進(jìn)群,歡迎你的到來
一鍵關(guān)注,點(diǎn)亮星標(biāo) ? 前沿不走丟!
![]()
一鍵分享,讓更多人了解前沿
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺“網(wǎng)易號”用戶上傳并發(fā)布,本平臺僅提供信息存儲服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.