本文來源：DeepTech深科技，科研大匠等
編者按：在科研被詳細(xì)分工的今天，離開同行的研究成果而獨(dú)立工作的可能性已經(jīng)接近于零了。而對于有的科研工作者來說，科學(xué)期刊文獻(xiàn)是他們獲得同行數(shù)據(jù)最可靠，也是最大的來源。長期以來大家都對期刊文獻(xiàn)的權(quán)威性和準(zhǔn)確性篤定無疑，然而《自然》雜志最新的一次調(diào)研卻讓所有人大跌眼鏡：七成的科研人員無法重復(fù)別人的實(shí)驗(yàn)，而超過五成的甚至重復(fù)自己的實(shí)驗(yàn)都有困難。更糟糕的是，這還有可能已經(jīng)成為科研圈的一種“新常態(tài)”。
可重復(fù)性可能是“科學(xué)”作為一種方法論被人類接受的核心原因?？芍貜?fù)性意味著完成相同的任務(wù)不再受限于執(zhí)行主體，而是一種可被傳授和復(fù)制的內(nèi)容或方法。換句話說，沒有了可重復(fù)性，也就沒有了科學(xué)性。讓我們一起帶著沉重的心情，看看情況到底有多糟吧。超過70％的研究人員在嘗試還原另一位科學(xué)家的實(shí)驗(yàn)中失敗，一半以上甚至不能還原自己的實(shí)驗(yàn)。自然科學(xué)雜志對1576名研究人員進(jìn)行了簡短的在線問卷調(diào)查。以下數(shù)據(jù)表明了他們對于再現(xiàn)研究成果的看法。數(shù)據(jù)顯示，研究人員對于研究的可重復(fù)性持矛盾態(tài)度。雖然52％的受訪者都認(rèn)為當(dāng)下存在顯著的“可重復(fù)性危機(jī)”，而且有不到31％的人認(rèn)為不能“重復(fù)”公開發(fā)表的結(jié)果，可能說明該結(jié)果并不正確。但是大多數(shù)人表示仍然相信公開發(fā)表的研究文獻(xiàn)。其實(shí)人們并沒有太多途徑可以去了解到底有多少科研文獻(xiàn)的結(jié)果是可重復(fù)的。我們所知的分析材料顯示，在心理學(xué)和癌癥生物學(xué)領(lǐng)域，分別有約40％和10％的研究具有可重復(fù)性。然而我們的受訪者卻樂觀得多：73％的人表示，他們認(rèn)為各自領(lǐng)域的論文至少有一半是可信的，其中物理學(xué)家和化學(xué)家普遍對此具有信心。對此問題的調(diào)查結(jié)果令人感覺十分困惑，約翰霍普金斯大學(xué)彭博學(xué)院（Johns Hopkins Bloomberg School of Public Health inBaltimore）的微生物學(xué)家阿圖羅·卡薩德瓦利（Arturo Casadevall）說?！爱?dāng)下研究人員對于可重復(fù)性的定義還沒有達(dá)成共識(shí)?！眱H僅是認(rèn)識(shí)到這一點(diǎn)已經(jīng)是一大進(jìn)步了，他說?！跋乱徊揭鞔_問題的根源，并取得共識(shí)。”長期關(guān)注科研成果可重復(fù)性的學(xué)者，英國布里斯托爾大學(xué)（the University of Bristol）的生物心理學(xué)家馬庫斯·穆納佛（Marcus Munafo）說，無法還原研究結(jié)果就像是科學(xué)家的成年禮?！拔以瓉砩蠈W(xué)的時(shí)候，總是試圖重做一些文獻(xiàn)中提到的，看起來很簡單的實(shí)驗(yàn)，卻無法做出與之相同的結(jié)果。然后，我就開始懷疑文獻(xiàn)的真實(shí)性，我后來才知道，不只我一個(gè)人遇到過類似問題?！?/span>學(xué)界所面臨的挑戰(zhàn)不是解決已發(fā)表的研究的可重復(fù)性問題。處于科學(xué)的前沿意味著有時(shí)你的研究結(jié)果并不健全，穆納佛說。“我們想要新的發(fā)現(xiàn)，而不是帶來誤導(dǎo)。”但是，從研究結(jié)論中擇除誤導(dǎo)性內(nèi)容并非易事。在我們調(diào)查的研究人員中，雖然絕大多數(shù)未能還原實(shí)驗(yàn)，但是只有不到兩成受訪者表示有其他研究人員聯(lián)系過他們，詢問無法重現(xiàn)他們的實(shí)驗(yàn)成果的原因。我們的調(diào)查結(jié)果與另一項(xiàng)調(diào)查驚人的相似，美國細(xì)胞生物學(xué)學(xué)會(huì)對近900個(gè)成員同樣進(jìn)行了在線調(diào)查（見go.nature.com/kbzs2b ）?？赡苁且?yàn)檫@個(gè)話題難以啟齒，抑或是試圖還原實(shí)驗(yàn)的研究員害怕遭到白眼或指責(zé)，同時(shí)也有泄露自己項(xiàng)目內(nèi)容的風(fēng)險(xiǎn)，他們往往不愿意向成果的最初發(fā)布者求助。也有少數(shù)受訪者表示他們曾嘗試過發(fā)布重復(fù)實(shí)驗(yàn)的研究結(jié)果。當(dāng)他們發(fā)現(xiàn)前人的成果不具備可重復(fù)性時(shí)，他們往往認(rèn)為其中一定有什么原因（一般都不是什么有用的原因）。業(yè)內(nèi)還有些潛規(guī)則，發(fā)表驗(yàn)證他人成果的研究，酬勞大都很少。期刊又不太愿意發(fā)表質(zhì)疑他人結(jié)果的研究。實(shí)際上，還有些受訪者表示，他們發(fā)表過論述前人成果無可重復(fù)的研究，但是期刊編輯和評論員希望他們在自己的研究中盡量少與原有結(jié)論進(jìn)行比較。盡管如此， 24％的受訪者表示，他們發(fā)表過驗(yàn)證型實(shí)驗(yàn)的研究，13％曾發(fā)表過驗(yàn)證失敗的文章。而從論文的被拒率來看，質(zhì)疑可重復(fù)性的論文比較容易被發(fā)表：只有12％的人的驗(yàn)證成功文章被拒；而質(zhì)疑可重復(fù)性的論文被拒的則更少，只有10％。來自得克薩斯理工大學(xué)健康科學(xué)中心（the Texas Tech University Health Sciences Cente）的受訪者亞伯拉罕·艾哈邁德（AbrahamAl-Ahmad）曾提交過一份手稿，解釋為什么他嘗試還原的一種干細(xì)胞技術(shù)不能正常運(yùn)作。他以為會(huì)遭到回絕，但驚喜的是，該文章居然過審。究其原因，他認(rèn)為，可能是因?yàn)樗峁┝酸槍υ搯栴}的解決方法。剩下的人認(rèn)為發(fā)表重復(fù)性研究的關(guān)鍵在于運(yùn)氣、毅力和審稿編輯的喜好。藥物開發(fā)顧問邁克爾·亞當(dāng)斯（Michael Adams）說，他的研究顯示，基于動(dòng)物模型的糖尿病研究存在嚴(yán)重缺陷，這篇文章已經(jīng)被拒絕了六次，部分原因是它沒有提出新的藥物靶標(biāo)。然而，他駁斥化合物治療恰加斯?。–hagas）功效的文章就很快通過了。三分之一的受訪者表示，在過去的五年內(nèi)，他們的實(shí)驗(yàn)團(tuán)隊(duì)已經(jīng)采取具體步驟，以提高研究成果的可重復(fù)性。這些表示改進(jìn)了的團(tuán)隊(duì)以藥學(xué)領(lǐng)域的居多，高達(dá)41%，而物理和工程學(xué)的最少，只有24%。在團(tuán)隊(duì)研究中重復(fù)實(shí)驗(yàn)或要求同組其他人重復(fù)自己的工作是最常見的做法。另外，詳細(xì)的實(shí)驗(yàn)記錄和標(biāo)準(zhǔn)化實(shí)驗(yàn)流程也很重要。所有這些都可以說是一大創(chuàng)舉。一位來自英國的不愿透露姓名的生物化學(xué)研究生說，為了還原她的實(shí)驗(yàn)項(xiàng)目，她花費(fèi)了雙倍的時(shí)間和材料。有的環(huán)節(jié)總是不能正常運(yùn)作，但是又無跡可尋，解決這些問題會(huì)讓她付出大量的額外花時(shí)間。盡管驗(yàn)證成果的可重復(fù)性能使其更有說服力，但是對于非創(chuàng)新項(xiàng)目，或者沒能產(chǎn)生驚人發(fā)現(xiàn)的項(xiàng)目來說，成本太高了。研究方法的整合本身就是一大課題，在弗吉尼亞大學(xué)（the University of Virginia）研究平滑肌細(xì)胞的博士后勞拉·山克曼（Laura Shankman）說。幾個(gè)博士后和研究生離開她的實(shí)驗(yàn)室之后，團(tuán)隊(duì)其余成員試圖重現(xiàn)他們的成果，那真是費(fèi)了一番功夫。實(shí)驗(yàn)室甚至決定暫停手頭的新項(xiàng)目，專門花時(shí)間來還原之前發(fā)表過的研究，這也意味著舊的實(shí)驗(yàn)室章程要修改了。她認(rèn)為，整合實(shí)驗(yàn)室的資源和流程，摒棄各自為政的工作形式，可以節(jié)約日后為了重現(xiàn)成果帶來的額外成本。這是一項(xiàng)長期的投資。布賴恩健康科學(xué)學(xué)院（BryanCollege of Health Sciences）的數(shù)學(xué)生物學(xué)家伊拉克利·羅拉澤（Irakli Loladze）估計(jì)，在確?？芍貜?fù)性的前提下完成項(xiàng)目需要多花大約30%的時(shí)間，即使是理論工作也是如此。從原始數(shù)據(jù)到最終圖像，他每個(gè)步驟都要仔細(xì)檢查以確?？杀蛔匪?。但是，這些任務(wù)很快變成只是工作的一部分。“可重復(fù)性就像是刷牙， ”他說?！斑@對你有好處，但它需要時(shí)間和努力。一旦你學(xué)會(huì)了，它就將成為一種習(xí)慣。”可重復(fù)性的最好的普及方法之一就是先備案，科學(xué)家在進(jìn)行實(shí)驗(yàn)前，將提出的假設(shè)和數(shù)據(jù)分析的計(jì)劃遞交第三方，以防出現(xiàn)“刻意挑選數(shù)據(jù)”的現(xiàn)象。只有少數(shù)幾個(gè)人曾經(jīng)提出過這個(gè)觀點(diǎn)。其中一個(gè)就是在墨爾本大學(xué)（the University of Melbourne）學(xué)習(xí)“道德決策”的研究生漢妮·沃金斯（Hanne Watkins）。先進(jìn)行數(shù)據(jù)收集，再回到最開始提出的的問題，她說，這樣能防止走進(jìn)學(xué)術(shù)的迷宮。過程中雖然費(fèi)時(shí)費(fèi)力，沒有什么能比獲得倫理委員會(huì)批準(zhǔn)，或是通過格式化檢查更加艱巨?！叭绻麖囊婚_始就按照正確的方法論前行，”她說，“它就變成了一個(gè)研究人員日常工作的一部分?！?/span>該調(diào)查還詢問了科學(xué)家們，什么因素導(dǎo)致了可重復(fù)性的危機(jī)。超過60％的人說，發(fā)文章的壓力和有主觀預(yù)設(shè)的報(bào)告，承擔(dān)著很大一部分責(zé)任。超過一半提到了，在實(shí)驗(yàn)室中沒有進(jìn)行足夠次數(shù)的試測，監(jiān)管不到位或統(tǒng)計(jì)學(xué)能力不足。少部分人還指出了一些障礙，諸如試劑變性或使用了難以重復(fù)的特殊技術(shù)。但是這些因素都是由共同的力量驅(qū)使的，威斯康星 - 麥迪遜大學(xué)（the University of Wisconsin–Madison）的發(fā)育生物學(xué)家朱迪斯·金布爾（JudithKimble）說，投資和崗位的競爭，日益增加的行政負(fù)擔(dān)剝奪了設(shè)計(jì)和研究的時(shí)間。“當(dāng)下所有人都鴨梨山大，”她說。而且這些造成的影響遠(yuǎn)遠(yuǎn)超過了對于項(xiàng)目的完成質(zhì)量本身，將危害整個(gè)學(xué)界。如果研究生在讀期間沒有時(shí)間去帶本科生，當(dāng)這些研究生畢業(yè)了建立了自己的實(shí)驗(yàn)室以后，他們有如何知道該怎么帶學(xué)生，怎么組織工作呢？“情況只會(huì)變得越來越糟， ”金布爾說。受訪者被要求從11種不同的提高可重復(fù)性的方法中，選出自己認(rèn)為有效的方法并排序。近90％，也就是超過1000人，勾選了“更巧妙的實(shí)驗(yàn)設(shè)計(jì)”，“優(yōu)化統(tǒng)計(jì)方法”和“更好的指導(dǎo)”，它們都比帶有經(jīng)濟(jì)鼓勵(lì)的選項(xiàng)排名靠前。即使是排名最低的項(xiàng)目“經(jīng)常查看筆記”，也贏得了高達(dá)69％的認(rèn)可。這項(xiàng)關(guān)于對策的調(diào)查問卷是通過電子郵件向《自然》雜志的讀者發(fā)布的，同時(shí)也發(fā)布在了在其網(wǎng)站以及社交媒體以向公眾征集意見。它篩選到的人群也許大多是能夠了解“可重復(fù)性”的意義，或者是對此問題懷有擔(dān)憂的。然而，結(jié)果表明，若要想通過推動(dòng)政策來解決這個(gè)問題，期刊、資方和研究機(jī)構(gòu)需要合作，在斯坦福大學(xué)（Stanford University）研究科學(xué)“科學(xué)可信性”（scientific robustness）的約翰·伊奧安尼迪斯說，“人們將對這樣的舉措表示歡迎?！贝蠹s80％的受訪者認(rèn)為，資助者和出版商應(yīng)該為提高可重復(fù)性承擔(dān)更大的責(zé)任。 “人們能意識(shí)到這些問題，并羅列出一系列簡單的方法來改善它們，這很好，” 穆納佛說?？紤]到這些想法甚至在主流媒體上被廣泛討論，現(xiàn)在確定應(yīng)對舉措可以說是至關(guān)重要的?！叭绻覀儾粚Υ瞬扇⌒袆?dòng)，時(shí)機(jī)可能錯(cuò)過。人們將會(huì)開始厭倦老是被指手畫腳說，他們需要站出來做些事情?！?/span>
以上內(nèi)容來源網(wǎng)址，僅用于學(xué)術(shù)分享，以上觀點(diǎn)不代表本公眾號(hào)，不用作商業(yè)行為，如有侵權(quán)請留言刪除！
2021年11月26日
