雖然目前有十幾個(gè)獲批用于乳腺癌篩查的人工智能系統(tǒng)，但很難客觀地評(píng)估它們的臨床表現(xiàn)。然而，現(xiàn)在有一個(gè)瑞典驗(yàn)證平臺(tái)可以比較人工智能系統(tǒng)檢測(cè)乳腺癌跡象的能力——它的開發(fā)是由卡羅林斯卡學(xué)院的研究人員領(lǐng)導(dǎo)的。
該試點(diǎn)項(xiàng)目于 2021 年啟動(dòng)，該平臺(tái)已于去年準(zhǔn)備好進(jìn)行試用。到目前為止，它已被用于根據(jù)來自瑞典三個(gè)地區(qū)的約 40,000 張乳房 X 線照片開始評(píng)估三個(gè)不同公司的算法。
“評(píng)估可能在臨床上使用的 AI 算法的診斷準(zhǔn)確性非常重要，”項(xiàng)目負(fù)責(zé)人、卡羅林斯卡學(xué)院腫瘤病理學(xué)系研究員、卡羅林斯卡大學(xué)醫(yī)院放射科醫(yī)生 Fredrik Strand 說。“即使它們符合監(jiān)管要求，也不意味著它們?cè)谒星闆r下都有效。”
在發(fā)表在《醫(yī)學(xué)影像學(xué)雜志》上的一篇論文中，研究人員描述了他們是如何設(shè)計(jì)該平臺(tái)的，希望更多的團(tuán)隊(duì)能夠開發(fā)出類似的平臺(tái)。
實(shí)現(xiàn)人工智能系統(tǒng)的客觀評(píng)估
Fredrik Strand說：“通過讓我們的代碼可以免費(fèi)訪問，我們希望它能用于實(shí)施類似的平臺(tái)，用于對(duì)除乳腺癌以外的其他類型的癌癥進(jìn)行算法評(píng)估，”他補(bǔ)充說，人們熱切期待這種客觀評(píng)估。該國(guó)的幾個(gè)地區(qū)已經(jīng)在考慮開始使用 AI 進(jìn)行乳房 X 光檢查。
“迫切需要一個(gè)可以在當(dāng)?shù)叵嚓P(guān)條件下評(píng)估算法的系統(tǒng)，”他說。“重要的是，每家醫(yī)院都選擇適合其要求和特定情況的正確系統(tǒng)，以避免遺漏乳腺癌或召回過多的健康女性。”
目前還沒有針對(duì)指定數(shù)據(jù)集的既定評(píng)估程序來評(píng)估 AI 算法在醫(yī)學(xué)診斷中的準(zhǔn)確性。人工智能系統(tǒng)的制造商已經(jīng)在不同的數(shù)據(jù)集上訓(xùn)練和測(cè)試了他們的算法，這些結(jié)果用于監(jiān)管批準(zhǔn)。在該平臺(tái)中，所有算法都處理相同的圖像，并將結(jié)果與??從國(guó)家乳腺癌質(zhì)量登記冊(cè) (NKBC) 中提取的實(shí)際癌癥診斷數(shù)據(jù)進(jìn)行比較，揭示算法之間的差異。由于今天的 AI 算法已經(jīng)針對(duì)開發(fā)人員可以訪問的特定人群進(jìn)行了訓(xùn)練，因此它們可能包含應(yīng)該識(shí)別的偏差。
標(biāo)簽：
免責(zé)聲明：本文由用戶上傳，如有侵權(quán)請(qǐng)聯(lián)系刪除！