使用傳統指標在機構級別檢測問題可能很困難。 圖片來源:SusanneB/Getty
研究人員表示,強調研究誠信“危險信號”的大學評分方法可以更容易地發現那些以犧牲嚴謹的科學為代價來追求傳統出版指標的機構。
研究誠信風險指數,上個月在 arXiv 的預印本中描述1,根據機構被撤回的論文數量以及從學術數據庫 Scopus 和 Web of Science 中除名的期刊中發表的論文數量對機構進行分類。研究人員表示,該指數可以改進目前獎勵研究產出數量而不是質量的大學排名系統。
精英大學策略可能會提升形象和排名,但代價是什麼?
貝魯特美國大學(American University of Beirut)的信息科學家洛克曼·梅霍(Lokman Meho)說,“大學希望被視為冉冉升起的新星”,但並不總是很清楚它們是“在堅實的基礎上崛起,還是在統計上的流沙上崛起”,他說,他開發該指數是為了幫助識別“誠信可能會因最大化指標的壓力而受損的環境”,例如公布率。他強調,該措施的目的不是為了識別研究不端行為,“而是揭示了值得進一步審查的漏洞”。
印度賴布爾的數據科學家、印度研究觀察(India Research Watch)的創始人阿查爾·阿格拉瓦爾(Achal Agrawal)說,該指數是“良好的第一步”,並且“應該由排名機構使用”,印度研究觀察是一個強調誠信問題的在線研究者和學生團體。它“對經常將卓越研究等同於龐大數量的系統進行了有力而及時的糾正”,印度古爾岡 BML Munjal 大學的數據科學家 Kiran Sharma 說。“它將注意力從數量轉移到完整性,有助於將學術激勵與真正的學術價值重新調整”。
排名重新思考
全球大學排名通常跟蹤一所大學發表了多少論文,以及其研究被引用的頻率。Meho 說,這種“積極數據”可能會產生誤導,一些機構會利用這些數據來攀升排名。“我想走另一條路,研究誠信部分,”他說。
Meho 的指數根據大學在除名期刊上發表的論文的比例以及過去兩年中論文被撤回的頻率對大學進行排名。Meho 說,他選擇這兩個標準是因為它們“客觀”且基於公開數據,儘管他探索了其他量化誠信問題的方法,例如是否存在高產作者,以及將機構研究人員列為第一作者或通訊作者的論文比例是否有所下降。該工具將機構分為五類之一,範圍從“低風險”到“危險信號”,這表明這兩個指標的比率都很高,表明需要緊急審查。
“極高產”作者數量的激增讓科學家們感到擔憂
在制定該指數時,Meho 分析了位於沙特阿拉伯、印度、黎巴嫩和阿拉伯聯合酋長國的 18 所機構,這些機構在過去幾年中經歷了“出版物的極速增長”,並在國際排名中迅速攀升。
例如,位於貝魯特的黎巴嫩美國大學 (LAU) 在 2018-19 年至 2023-24 年期間,其研究人員撰寫的出版物數量增加了 908%,遠高於黎巴嫩所有其他機構 17% 的平均增長率。但分析發現,這些出版物中有足夠多的出版物被撤回或在被除名的期刊上發表,使其的研究誠信風險指數得分處於“紅旗”類別中。LAU 研究人員的第一作者率在同一時期也急劇下降,從 57% 下降到 18%。預印本稱,這樣的數字應該促使該大學——以及分析中的其他其他人——更仔細地審查他們的研究人員發表的論文。
快速增長
LAU 的一位發言人告訴《自然》雜誌,出版物的激增部分歸因於它在 2022 年啟動的一項試點計劃,該計劃支持 130 名研究人員。該發言人說,撤稿和除名期刊出版物數量的增加“發生在研究產出快速增長的時期”,並且“第一作者和通訊作者的變化是擴大研究合作的結果”。
這些大學的科學文章被撤稿最多
他們同意,原則上為研究誠信打分是一個好主意,但表示預印本中描述的研究誠信風險指數“缺乏機構背景,依賴於一般性的假設”。
分析中包括的另一個機構是位於利雅得的沙特國王大學 (KSU),該大學在 2023-24 年在退市期刊上發表了 986 篇論文,在全球排名第二。根據今年發表的《自然》分析,它也是過去十年中世界上撤稿率最高的大學之一。KSU 沒有回應《自然》新聞團隊的置評請求。
在倫敦泰晤士高等教育 (THE) 編製的 2025 年世界大學排名中,LAU 和 KSU 都位列前 300 名大學,目前沒有考慮撤稿。泰晤士高等教育的一位發言人表示,它使用多個指標對大學進行排名,包括一些評估論文質量並防止“對分數產生任何影響的縱性引用做法”的指標。“我們不斷審查這些指標。我們還從分析中刪除了所有已停刊的期刊,”發言人說。
doi: https://doi.org/10.1038/d41586-025-01727-3