誰害怕同行評審?
《誰害怕同行評審?》(英語:)為《科學》記者約翰·伯罕農於2013年10月4日發表的文章,講述其對付費開放取用科學期刊的同行評審程序所進行的調查。2013年1月至8月,伯罕農向304份付費開放取用出版商發佈的學術期刊提交了虛假學術論文。他稱文章内容“錯誤百出、科學謬論顯而易見,應當被期刊編輯及同行評審員立馬退貨”,唯最後60%的學術期刊通過了伯罕農杜撰的論文[2][3]。
背景
2000年,付費開放取用科學項目開始出現,當中包括當年成立的及公共科學圖書館。這類學術期刊不對讀者徵收訂閲費,而是向提交論文的作者(或其資助者)徵收出版費,論文公諸於世後供讀者在網上免費讀取。此類模式稱作“金色開放取用”,被視爲是開放取用出版模式永續經營的其中一種手段[4]。亦有出版商采用延遲開放取用模式經營,論文發表後短時間内需付費查閲,唯過了指定時間後則可免費讀取。這兩種開放取用出版模式日益盛行,2011年發表的學術論文中,於2013年時至少有一半可以在網上免付費公開取得[5]。
鑒於創立出版社的門檻不高,且獲利快速、回酬高,市場上開始冒出“掠奪性出版社”。這類出版商發表低質量的學術期刊,編審控制與同行評審程序形同虛設,爲了盡可能賺取更多出版費而不顧品質發表每一篇接獲投稿的論文。一些出版方甚至盜用知名科學家名堂,稱其為期刊編輯或同行評審員,讓論文作者信以爲真。亦有出版商故意混淆出版社地址和真實身份[6]。此類詐騙型出版商層出不窮,而科學界對於應當采取什麽行動應對,也是議論紛紛[7]。
調查方法
虛假論文
伯罕農運用創建了“科學版本的[註 1]”[2][8]。論文的基本脈絡為“品種Y地衣的X分子抑制Z癌細胞的生長”。他創建的數據庫記有各種分子、地衣及癌細胞,用作X、Y和Z的替代詞。每一篇論文的數據及結論都一樣,内容大意指發現了一種從地衣身上提取的成分可用作新型抗癌藥物,但所提供的數據其實都無法支撐結論,且有明顯破綻。作者身份及所屬機構也全數虛構[9][10]。
選定出版商
伯罕農參考了首次點出掠奪性出版社廣泛存在的傑弗里·比爾所發表的比爾列表,此列表由比爾個人創建,列出他認爲是以掠奪性模式經營的出版社。伯罕農也參考了正規的開放取用期刊指南(),在結合兩者後整理出了一份詳盡的付費開放取用出版商列表。他隨後開始篩選,用英文發表、收取出版費、至少出版一份醫學、生物學或化學期刊的304家出版社獲保留,其中有167家為成員,121家為比爾列表所稱的掠奪性出版商,另有16家出版商為成員,但同時也在比爾列表上榜上有名。此次調查專注在付費開放取用期刊,伯罕農拒絕將其他開放取用模式或付費訂閲型科學期刊囊括在調查内,他認爲傳統科學期刊的評閲時間太冗長。也正因如此,此次調查未有對不同經營模式的學術期刊品質作對比[11]。
調查結果
通過 駁回
總計304份科學期刊中,157份通過了伯罕農杜撰的論文,98份駁回,剩餘49份中有29份期刊的網站失效,另20份在伯罕農發佈文章時仍未完成審閲[2]。完成審閲的255份期刊中,約60%很可能在完全沒有進行同行評審下就決定通過或回拒論文。在未經同行評審之下即刻駁回論文或展示了編輯部的篩濾職能,但未經同行評審之下通過論文則顯示了此類期刊審閲論文的程序存在重大紕漏。僅36份期刊點出了論文的科學性謬誤,其中16份科學期刊雖指論文品質較差甚至毫不留情地抨擊,但最後仍通過了論文。接受這篇虛假論文的不乏知名研究院及出版公司旗下的期刊,其中就包括了愛思唯爾、賽吉、威科集團(旗下的)及數所大學[2]。
公共科學圖書館及發行的科學期刊駁回了這份僞造論文。其中,《》進行的同行評審可説是最為嚴謹,且是唯一一份指出論文倫理缺陷的科學期刊。該刊發現此研究在使用動物製造癌症細胞株時,沒有詳細將對待動物的方式記錄在案[2]。
回應
開放取用出版商
調查報告公佈後,個別出版商宣佈將至少三份科學期刊撤出市場[16]。表示該指南正審查會員列表,且實行更嚴謹的入圍標準。[17]開放取用學術出版者協會()成立委員會,調查該會其中三家出版商成員通過僞造學術論文一事[18]。2013年11月11日,終止德孚醫藥出版社及希卡里()的會籍,而賽吉則被標記為“審查中”,長達半年[19]。賽吉出版社發佈文告指該社正審核通過虛假論文的期刊,但不會就此停刊[20]。賽吉在改進期刊編輯機制后,在的審查階段尾聲時重獲會籍[21]。2015年9月,在審核了德孚醫藥出版社新定制的編輯及同行評審機制後,允許德孚重返該會[22]。
科學界
報告出爐數小時後,《科學》的調查工作引來了開放取用運動支持者的猛烈抨擊[23][24]。
公共科學圖書館的創始人之一邁克爾·艾森是第一位批判調查的大牌人物。他在個人部落格寫道:“《科學》(唯非伯罕農)所作所爲,即指科學出版的問題在於開放取用模式使網絡詐騙可行,就好像在說國際金融行業的問題在於促使尼日利亞詐騙案發生。科學出版所面對的疑難根深蒂固。然而解決問題的辦法不是推翻開放取用出版模式,是搞好同行評審。[25]”艾森也諷刺如《科學》這般的付費閲讀期刊發表此類調查是自打嘴巴,因爲《科學》的同行評審也曾在砷元素DNA論文事件中通過存有紕漏的學術研究。
在一場由哈佛開放取用計劃領導人彼得·薩伯主持的討論會中,艾森與伯罕農就此事展開對話。艾森炮轟伯罕農的調查對開放取用運動造成名譽上的傷害[26]。他對伯罕農說:“你的研究特別針對了開放取用期刊,無論你是否有此意,都强烈隱射著開放取用期刊更可能進行品質低劣的同行評審,因此應該遭受更嚴厲的審核。”伯罕農回應稱此類批評就像是“狙擊信使”(遷怒於揭發壞消息的人)。
另一方面,多個單位站出來支持是次調查[27][13],且表示對論文騙局感到擔憂[28][29][30]。出版倫理委員會則回應稱:“無可否認此事揭發了很多問題……但我認爲這可能不是《科學》進行調查的主要目的。[31]”
影響
科學家探討了使同行評審透明化的多個提議[32]。若實行開放同行評審,科學期刊就必須公佈同行評審報告,完全沒有同行評審程序的掠奪性期刊則將自曝其短,抑或需僞造文件[33]。另有科學家建議更嚴謹地篩濾期刊,並授權由或等負責。也收緊了期刊入選制度,希望收錄在該指南内的期刊可作爲可信期刊的公衆指引,與比爾列表列出掠奪性期刊作用相似,唯内容相反[34]。
註釋
- 一種在西方國家流行的填字游戲。
參考文獻
- Paper 1 in the data supplement for Bohannon 2013.
- Bohannon, John. . Science. 2013, 342 (6154): 60–65. Bibcode:2013Sci...342...60B. PMID 24092725. doi:10.1126/science.342.6154.60 .
- Bohannon, John. . Science. 2013a, 342 (6154): 60–65 [2021-06-11]. PMID 24092725. doi:10.1126/science.342.6154.60 . (原始内容存档于2015-10-09).
- Suber, Peter. . Earlham College. [2013-10-21]. (原始内容存档于2014-02-28).
- Van Noorden, Richard. . Nature. 2013-10-20, 500 (7463): 386–387. Bibcode:2013Natur.500..386V. ISSN 0028-0836. PMID 23969438. doi:10.1038/500386a .
- Knox, Richard. . NPR. 2013-10-03 [2013-10-20]. (原始内容存档于2015-05-09).
- Butler, Declan. . Nature. 2013-05-27, 495 (7442): 433–435. Bibcode:2013Natur.495..433B. ISSN 0028-0836. PMID 23538810. doi:10.1038/495433a .
- Koebler, Jason. . Motherboard. [2013-10-22]. (原始内容存档于2013-10-23).
- . The Economist. 2013-10-05 [2013-10-20]. (原始内容存档于2019-10-29).
- Vergano, Dan. . National Geographic. 2013-10-03 [2013-10-22]. (原始内容存档于2019-04-11).
- Oransky, Ivan. . Retraction Watch. 2013-10-03 [2013-10-22]. (原始内容存档于2013-10-23).
- Beall, Jeffrey. . Scholarly Open Access. [2013-10-22]. (原始内容存档于2013-10-12).
- Davis, Phil. . The Scholarly Kitchen. 2013-10-04 [2013-10-20]. (原始内容存档于2021-06-09).
- . Directory of Open Access Journals. 2013-10-04 [2013-10-22]. (原始内容存档于2013-10-23).
- . Science. AAAS. [2013-10-21]. (原始内容存档于2017-03-07).
- Oransky, Ivan. . Retraction Watch. 2013-10-17 [2021-06-11]. (原始内容存档于2013-10-25).
- . Directory of Open Access Journals. 2013-10-18 [2013-10-21]. (原始内容存档于2013-11-10).
- Redhead, Claire. . Open Access Scholarly Publishers Association. 2013-11-11 [2013-11-11]. (原始内容存档于2021-05-08).
- Redhead, Claire. . Open Access Scholarly Publishers Association. 2013-10-04 [2013-11-11]. (原始内容存档于2021-05-06).
- Gamboa, Camille. . Sage. [2013-11-22]. (原始内容存档于2013-10-14).
- Shaffi, Sarah. . The Bookseller. 2014-04-29 [2014-06-02]. (原始内容存档于2018-10-14).
- Redhead, Claire. . 2015-09-23 [2015-09-29]. (原始内容存档于2020-11-28).
- Basken, Paul. . The Chronicle of Higher Education. 2013-10-04 [2013-10-20]. (原始内容存档于2013-10-21).
- Davis, Phil. . The Scholarly Kitchen. 2013-11-12 [2013-11-12]. (原始内容存档于2021-05-09).
- Eisen, Michael. . [2013-10-21]. (原始内容存档于2018-09-24).
- Peter Suber. . [2021-06-11]. (原始内容存档于2021-06-11).
- Yirka, Bob. . Phys.org. 2013-10-04 [2013-10-20]. (原始内容存档于2021-06-06).
- Tatalović, Mićo. . Scidev.net. 2013-03-10 [2013-10-20]. (原始内容存档于2017-12-17).
- Mudur, G S. . The Telegraph. 2013-10-03 [2013-10-20]. (原始内容存档于2016-03-04).
- Shieber, Stuart. . The Occasional Pamphlet. Harvard Law School. 2013-10-15 [2013-10-20]. (原始内容存档于2013-10-22).
- . COPE. 2013-10-10 [2021-06-11]. (原始内容存档于2020-11-25).
- . Nature Materials. 2011, 10 (2): 81. Bibcode:2011NatMa..10...81.. PMID 21258345. doi:10.1038/nmat2952 .
- Bonnie Swoger. . Information Culture. Scientific American. 2014-11-26 [2021-06-11]. (原始内容存档于2015-04-26).
- Van Noorden, R. . Nature. 2014, 512 (7512): 17. Bibcode:2014Natur.512...17V. PMID 25100463. doi:10.1038/512017a .