Springer Nature撤回近40篇論文，因為它們使用的這個數(shù)據(jù)集存在問題

本文整理自《The Transmitter》的獨家報道：“Exclusive: Springer Nature retracts, removes nearly 40 publications that trained neural networks on ‘bonkers’ dataset”。

據(jù)《The Transmitter》報道，出版商Springer Nature開始撤回數(shù)十篇論文，這些論文所依賴的數(shù)據(jù)集存在倫理與可靠性問題。該出版商的科研誠信部門負責人Tim Kersjes表示：自11月16日起，已有5篇論文被撤回，另有33篇計劃撤回。

這些論文使用的數(shù)據(jù)集包含兒童面部照片，嘗試訓練神經(jīng)網(wǎng)絡以區(qū)分自閉癥與非自閉癥兒童。

數(shù)據(jù)集存在倫理與可靠性問題

根據(jù)數(shù)據(jù)集的相關描述，是已退休工程師Gerald Piosenka于2019年創(chuàng)建了該數(shù)據(jù)集。他從一些“自閉癥主題網(wǎng)站”下載兒童照片，并將其上傳至谷歌旗下的機器學習公共數(shù)據(jù)集平臺Kaggle。數(shù)據(jù)集中包含2900多張兒童面部照片，其中一半被標注為自閉癥，另一半被標注為非自閉癥。

在閱讀了一篇使用該數(shù)據(jù)集的論文后，牛津大學發(fā)育神經(jīng)心理學榮譽教授Dorothy Bishop去下載了數(shù)據(jù)集，看完之后表示：“我極度震驚，尤其是看到該數(shù)據(jù)集的創(chuàng)建方式時，第一反應是荒謬。”

Dorothy Bishop表示，在未確認每個孩子身份的情況下，根本無法核實這些兒童是否患有自閉癥。這些照片的光照條件、拍攝角度與表情都不一樣，會給數(shù)據(jù)集引入過多干擾因素。“即便自閉癥與非自閉癥存在面部特征差異，依靠這些照片也很難將其識別出來，因為存在太多與病情無關的變量”。

澳大利亞兒童研究所首席研究員Gail Alvares認為，圖片是從不同網(wǎng)站下載的，這些兒童及其家庭是否同意將其用于研究值得懷疑。“將圖片上傳至互聯(lián)網(wǎng)，并不意味著授權其用于科研目的”。

一位Kaggle用戶曾在評論區(qū)提出相同的質疑，Gerald Piosenka回應稱未侵犯隱私，所有圖片均屬公開資源，他表示“還有比'促進兒童自閉癥早期檢測與治療'更符合倫理的嗎？”。

就其數(shù)據(jù)集影響到多篇論文導致撤稿一事，Gerald Piosenka并未予以回應。

該數(shù)據(jù)集已引起多個出版商關注

Tim Kersjes透露，Springer Nature在上個月針對兩篇論文的獨立調查中，首次注意到這個數(shù)據(jù)集。

當時，科研誠信團隊正著手調查一篇“特別關注”的論文，收到圖盧茲大學計算機科學教授Guillaume Cabanac的提醒，要關注另一篇包含“扭曲短語”的論文，可能是由AI生成的。

調查團隊注意到，這兩篇論文均使用了上文提及的這個數(shù)據(jù)集，并認為該數(shù)據(jù)集可靠性存疑，且圖片收集未獲倫理審批或知情同意。Tim Kersjes指出：“這一重大方法學缺陷，動搖了已發(fā)表成果的結論有效性”。

2022年5月10日，該數(shù)據(jù)集的創(chuàng)建者Gerald Piosenka在Kaggle上留言，稱因違反平臺服務條款，刪除了數(shù)據(jù)集。但隨后，他又將數(shù)據(jù)集文件存至Google Drive。Springer Nature團隊還發(fā)現(xiàn)了兩個由其他Kaggle用戶上傳的數(shù)據(jù)集，疑似原始數(shù)據(jù)集的復制版本。

《The Transmitter》聯(lián)系了Gerald Piosenka和谷歌后，其他用戶上傳的數(shù)據(jù)集從Kaggle上消失了，Piosenka分享數(shù)據(jù)集鏈接的評論也被刪除了。

Tim Kersjes及其團隊系統(tǒng)審查了Springer Nature的出版物，以發(fā)現(xiàn)是否有其他文章使用了該數(shù)據(jù)集。最終計劃撤稿38篇論文、會議論文集和書籍章節(jié)，并下架其中的37篇（這些下架出版物可保留撤稿聲明、論文標題、作者、DOI等信息，但論文本身無法訪問）。

除了自查，Springer Nature還聯(lián)系了其他出版商就該數(shù)據(jù)集問題提出預警。

《The Transmitter》通過谷歌學術搜索，發(fā)現(xiàn)至少90篇出版物引用了該數(shù)據(jù)集，其中25篇發(fā)表于IEEE（電氣電子工程師學會）旗下期刊。IEEE發(fā)言人回應：“已知悉該問題，正在調查中”。

Wiley曾于2023年撤回了兩篇使用該數(shù)據(jù)集的論文。其發(fā)言人表示：“這兩篇論文是因其他原因被撤稿。我們近期關注到針對該數(shù)據(jù)集的質疑，正在核查旗下其他論文”。

上文提出質疑的兩位學者Dorothy Bishop和Gail Alvares都強調，面部特征不能用于診斷自閉癥。自閉癥是復雜且具異質性的病癥，臨床行為特征評估才是診斷金標準。

Gail Alvares指出，“面部特征與自閉癥診斷的關聯(lián)性”曾經(jīng)是研究熱點，五年前關注度最高。有人提出了“面部特征的差異可能反映了大腦發(fā)育的差異”的假設。此類研究需要獲得知情同意、經(jīng)過臨床確診的大規(guī)模嚴格對照圖像樣本，而這個數(shù)據(jù)集“完全不符合可用于科研的數(shù)據(jù)庫的準確性標準”。

文章整理自：https://www.thetransmitter.org/retraction/exclusive-springer-nature-retracts-removes-nearly-40-publications-that-trained-neural-networks-on-bonkers-dataset/