曰本美女∴一区二区特级A级黄色大片, 国产亚洲精品美女久久久久久2025, 页岩实心砖-高密市宏伟建材有限公司, 午夜小视频在线观看欧美日韩手机在线,国产人妻奶水一区二区,国产玉足,妺妺窝人体色WWW网站孕妇,色综合天天综合网中文伊,成人在线麻豆网观看

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

審視醫(yī)學(xué)影像AI,哪些算法最具生命力?

醫(yī)健AI掘金志 ? 來源:IoT科技評論 ? 作者:IoT科技評論 ? 2021-01-18 10:15 ? 次閱讀

9大Fellow得主,用11個案例,帶你看清今年的醫(yī)學(xué)影像AI算法和研究熱點(diǎn)。

近日,第四屆圖像計算與數(shù)字醫(yī)學(xué)國際研討會(ISICDM 2020),在遼寧省沈陽市的東北大學(xué)國際學(xué)術(shù)交流中心舉辦。

在開幕式環(huán)節(jié)中,中科院自動化研究所田捷教授以《醫(yī)學(xué)影像中的人工智能的算法和研究熱點(diǎn)》為題做了大會報告。

田捷教授現(xiàn)任中國科學(xué)院自動化所研究員、分子影像重點(diǎn)實(shí)驗(yàn)室主任、北航-首醫(yī)大數(shù)據(jù)精準(zhǔn)醫(yī)療高精尖創(chuàng)新中心主任。

自2010年起,田捷教授連續(xù)獲得計算機(jī)視覺與醫(yī)學(xué)影像分析領(lǐng)域的9大Fellow,其中包括AAAS 、IEEE 、IAMBE 、SPIE 、AIMBE 、IAPR 、OSA 、ISMRM 、WMIS。同時也是兩項(xiàng)國家重點(diǎn)基礎(chǔ)研究發(fā)展計劃(973計劃)首席科學(xué)家。

他主要從事醫(yī)學(xué)影像分析與生物特征識別的研究和應(yīng)用的工作,還長期從事光學(xué)分子影像研究,在光學(xué)分子成像等領(lǐng)域做出了系統(tǒng)性、創(chuàng)新性貢獻(xiàn),特別是生物自發(fā)光和激發(fā)熒光斷層成像及其應(yīng)用方面。

征得田捷教授同意后,我們提供PPT供大家學(xué)習(xí)和下載。關(guān)注公眾號《醫(yī)健AI掘金志》,對話框回復(fù)“田捷”即可獲取。

以下是田捷演講全文,雷鋒網(wǎng)《醫(yī)健AI掘金志》做了不改變原意的編輯:

田捷:今天和大家匯報的題目是《醫(yī)學(xué)影像中的人工智能的算法和研究熱點(diǎn)》,分為以下幾個方面:包括自己團(tuán)隊對醫(yī)學(xué)影像人工智能的工作進(jìn)展,以及回歸臨床的人工智能到底給患者和臨床帶來什么收益。

人工智能跟我們醫(yī)學(xué)影像密切相關(guān),這是斯坦福大學(xué)放射系主任,Sanjiv Sam Gambhir的歸納,從人工智能的早期像符號系統(tǒng)期,就開始用醫(yī)學(xué)影像來做良惡性判斷,再到AI 2.0機(jī)器學(xué)習(xí),判斷會更加準(zhǔn)確,再到AI的3.0。

隨著方法不斷更新,人工智能在醫(yī)學(xué)影像中的應(yīng)用也越來越深入,越來越多臨床問題被更好的解決,使得患者能最終獲益。

另一方面,醫(yī)生和機(jī)器學(xué)習(xí)的關(guān)系,引用斯坦福大學(xué)Sanjiv Sam Gambhir教授在WMIC 2018給出的例子,從醫(yī)生角度來看,人工智能是計算機(jī)做人類認(rèn)為智能的事,其從大到小包括機(jī)器學(xué)習(xí)、神經(jīng)網(wǎng)絡(luò)深度學(xué)習(xí)。同時深度學(xué)習(xí)更適合解決像超聲這樣人工難以定義特征的影像,下面的表述也是驗(yàn)證他這樣的觀點(diǎn)。

56ea05a6-57d3-11eb-8b86-12bb97331649.png

AI的另一重要概念即大數(shù)據(jù),一個病人影像的每個斷層是512×512的像素,200個斷層即可組成5000多萬個體素,形成1000~10萬個影像特征,醫(yī)生看片不可能看到1000~10萬個特征。

但計算機(jī)可以通過高通量處理對信息進(jìn)行降維,使得診斷更準(zhǔn)確,從而輔助醫(yī)生進(jìn)行決策。

57250462-57d3-11eb-8b86-12bb97331649.png

下面我將主要分享,以人工智能為核心,在數(shù)據(jù)、圖像、知識這三個環(huán)之間的作用。

CT、磁共振把信號變成圖像,讓人眼來判讀,來提取特征,人腦來加工,最終形成診斷知識,這恰好是現(xiàn)在影像組學(xué)和人工智能,醫(yī)學(xué)影像的研究熱點(diǎn)。我將對這些熱點(diǎn),進(jìn)行逐個分析。

首先從信號到圖像,過去都是醫(yī)學(xué)影像器械廠商完成,例如從K-空間,磁共振圖像生成,有一系列物理模型和數(shù)學(xué)模型,像萊登投影,螺旋采樣等這一系列方法。

但現(xiàn)在人工智能也在干這事,使得從復(fù)雜頻率信號到實(shí)域變換,生成人眼能看的磁共振圖像,經(jīng)過訓(xùn)練以后,從圖像中獲取知識給出判斷,但這種重建方法受到了降采樣噪聲干擾,使得很多圖像失真。

5777933a-57d3-11eb-8b86-12bb97331649.png

而人工智能不需要物理模型和數(shù)學(xué)公式,可以直接從信號到圖像,既克服失真,又可高質(zhì)量重建。此外AI重建出來的結(jié)果,顛覆了過去由物理模型和數(shù)學(xué)算法降采樣得到圖像的方式,其信噪比更高,圖像質(zhì)量更好。

57b1113c-57d3-11eb-8b86-12bb97331649.png

這是前年發(fā)表在Nature雜志上的文章,以深度學(xué)習(xí)進(jìn)行重建,解決了磁共振從信號到圖像的問題。得到了更好圖像質(zhì)量效果,對廠商也起到了顛覆和促進(jìn)作用,該工作是由哈佛大學(xué)醫(yī)學(xué)院完成的,第一作者是中國人。

5807cf2c-57d3-11eb-8b86-12bb97331649.png

我們團(tuán)隊也開展了類似工作,通過訓(xùn)練樣本得到光源位置,不需要經(jīng)過輻射傳播方程來近似求解,以深度學(xué)習(xí)進(jìn)行重建,其中沒有復(fù)雜物理過程和簡化數(shù)學(xué)模型,這個工作我們也發(fā)表在了Optica上。該工作以深度學(xué)習(xí)進(jìn)行重建,與前面磁共振邏輯思路類似,按照這個思路我們做了一個系列,包括自發(fā)熒光,激發(fā)熒光,光聲成像。

從信號到圖像完全可以用深度學(xué)習(xí),噪聲更低,效果更好,顛覆了復(fù)雜物理過程和數(shù)學(xué)模型,使得重建更加有效。

5842c852-57d3-11eb-8b86-12bb97331649.png

回歸到今天的主要內(nèi)容:圖像到知識。

重點(diǎn)從4個方面進(jìn)行匯報:基于人工智能的影像組學(xué)方法;基于深度學(xué)習(xí)的影像智能診斷;特異性新型卷積神經(jīng)網(wǎng)絡(luò)模型;醫(yī)療人工智能的前沿?zé)狳c(diǎn)方向。

基于人工特征的影像組學(xué)分析

影像組學(xué)概念綜合了醫(yī)學(xué)影像、基因和臨床大數(shù)據(jù),用人工智能高通量提取疾病相關(guān)信息,輔助臨床決策,和醫(yī)生看片是一樣的邏輯。

醫(yī)生看病是從影像提取特征,人眼看結(jié)構(gòu)特征,根據(jù)經(jīng)驗(yàn)進(jìn)行人腦加工,最后給出決策。計算機(jī)通過影像數(shù)據(jù),定量提取高通量特征,人工智能建模來輔助決策。

其中最大區(qū)別是人眼看的是結(jié)構(gòu),計算機(jī)看到的是高維信息。

高維信息能夠提取微觀基因蛋白信息在宏觀影像上的表達(dá),從而反映人體組織細(xì)胞和基因水平變化,使得診斷更準(zhǔn)確,治療更有效,這是影像組學(xué)意義所在。

589811ea-57d3-11eb-8b86-12bb97331649.png

影像組學(xué)也可以跟其他組學(xué)融合,通過人工智能高通量的提取特征信息,再進(jìn)行建模,實(shí)現(xiàn)精準(zhǔn)診斷、預(yù)后預(yù)測以及治療方案選擇。

圍繞著這幾個方面舉典型案例,說明人工智能到底解決了什么問題,患者的獲益在哪里。

人工智能對醫(yī)學(xué)來說到底效果是什么?

對臨床來說,影像是無創(chuàng)的,病理是有創(chuàng)的,通過手術(shù)和穿刺才能得到。病理是微觀,影像是宏觀,如果借助人工智能從宏觀影像上挖掘出微觀信息,把影像逼近病理,使兩個技術(shù)1+1>2,診斷將更準(zhǔn)確。

58d550f0-57d3-11eb-8b86-12bb97331649.png

另一方面,把宏觀影像跟外部預(yù)后結(jié)合在一起,定量分析影像數(shù)據(jù)和臨床數(shù)據(jù),也能夠輔助疾病個性化診療和精準(zhǔn)預(yù)測。

5905357c-57d3-11eb-8b86-12bb97331649.png

其中最重要的就是特征,人眼只能看到形狀特征。一些高維特征、標(biāo)準(zhǔn)方差、能量、復(fù)雜灰度、共生矩陣特征和熵,人眼都沒辦法看,也沒辦法加工,但計算機(jī)可以處理這些高維信息。

5a3a05c6-57d3-11eb-8b86-12bb97331649.png

這是廣東省人民醫(yī)院劉再毅教授發(fā)表在Radiology的一篇文章。中間結(jié)構(gòu)圖是影像;兩個癌癥患者年齡差不多,結(jié)構(gòu)特征能看到的信息差不多相同。

放射科大夫?qū)憟蟾娑紩枋鲂螤畈灰?guī)則,邊緣較模糊,長徑多少,只能讓臨床外科和內(nèi)科大夫去做判斷。

但這兩個人的預(yù)后差別很大,一個5年半沒有復(fù)發(fā),一個一年半就去世了。

這就是腫瘤異質(zhì)性,從結(jié)構(gòu)上看不到這兩個患者的預(yù)后和腫瘤異質(zhì)性(腫瘤本質(zhì)的差別)。

5d8457a4-57d3-11eb-8b86-12bb97331649.png

我覺得醫(yī)工交叉要解決問題,研究思路應(yīng)該是源于臨床提出問題,要具體化,越具體越好。特別是現(xiàn)在臨床解決不了的某一個點(diǎn)上的某一個具體問題,找適合的人工智能的數(shù)據(jù)處理方法和分析方法,最后回歸臨床應(yīng)用。

下面我會舉一些例子,說明了人工智能的效果。不同應(yīng)用目的的工作為例子,以印證上面研究思路,案例均摘自Ebiomedicine(柳葉刀子刊)。

案例一:新輔助治療效果評估

60ada9c6-57d3-11eb-8b86-12bb97331649.png

這是與南方醫(yī)院合作的科研案例,針對特定臨床問題:局部晚期宮頸癌治療前難以預(yù)測新輔助治療療效。采用了275例新輔助化療前宮頸癌多中心多序列MR影像。

用人工智能多序列、多區(qū)域MR影像組學(xué)特征分析,實(shí)現(xiàn)局部晚期宮頸癌患者的新輔助療效精準(zhǔn)預(yù)測。從過去不能從磁共振圖看出問題,到借助人工智能加磁共振的分析達(dá)到精準(zhǔn)預(yù)測。

63dba9ae-57d3-11eb-8b86-12bb97331649.png

這個成果發(fā)表在醫(yī)學(xué)雜志Ebiomedicine上,國際同行法國教授Dimitris Visvikis認(rèn)為該研究表明在多中心驗(yàn)證影像組學(xué)模型是可行的,該工作將促進(jìn)影像組學(xué)的臨床應(yīng)用轉(zhuǎn)化。

案例二:孕婦產(chǎn)后出血預(yù)測

這是與河南省人民醫(yī)院合作的案例:通過分析近300例胎盤增生孕婦產(chǎn)前MR影像、MR影像組學(xué)特征,對多中心T2WI序列進(jìn)行智能分析實(shí)現(xiàn)孕婦剖腹產(chǎn)發(fā)生出血的精準(zhǔn)預(yù)測。

671e536e-57d3-11eb-8b86-12bb97331649.png

案例三:肝硬化門脈高壓預(yù)測

前面是影像逼近病理,這是對肝靜脈壓梯度測量的預(yù)測,通過回顧性CT圖像數(shù)據(jù)進(jìn)行學(xué)習(xí)預(yù)測,提取了特征再進(jìn)行前瞻性AI預(yù)測,效果也不錯。

675cdcec-57d3-11eb-8b86-12bb97331649.png

案例四:遠(yuǎn)處轉(zhuǎn)移風(fēng)險評估

鼻咽癌遠(yuǎn)處轉(zhuǎn)移風(fēng)險評估案例中,我們使用176例鼻咽癌患者M(jìn)R影像進(jìn)行數(shù)據(jù)定量分析,實(shí)現(xiàn)治療前對鼻咽癌患者遠(yuǎn)處轉(zhuǎn)移風(fēng)險的精準(zhǔn)預(yù)測。

6794785a-57d3-11eb-8b86-12bb97331649.png

案例五:腦膜瘤腦組織侵襲風(fēng)險評估

第五個案例是腦膜瘤腦組織侵襲風(fēng)險的預(yù)測。腦膜瘤患者會有術(shù)前評估不準(zhǔn)確性,我們?nèi)?728例術(shù)前腦膜瘤患者多序列MR影像,分析定量影像組學(xué)特征與腦組織侵襲潛在關(guān)聯(lián),實(shí)現(xiàn)了腦膜瘤患者腦組織侵襲風(fēng)險精準(zhǔn)預(yù)測。

67be15e8-57d3-11eb-8b86-12bb97331649.png

這些案例都是以問題為導(dǎo)向,說明人工智能解決臨床的特定問題,但問題一定是源于臨床,找到一個特定問題,高于臨床找到適合的方法,回歸臨床看效果。

對于AI找肺結(jié)節(jié)類問題在臨床上并不一定有實(shí)際意義,也許方法很炫,在特定數(shù)據(jù)集上也很有效,但距離實(shí)際的臨床問題和患者都太遠(yuǎn)。

基于深度學(xué)習(xí)的影像智能診斷

影像組學(xué)還存在采用人工定義特征靈活性較低的問題,通過端到端的深度神經(jīng)網(wǎng)絡(luò)在數(shù)據(jù)中自動提取特征,能夠減少對人的依賴,但這樣的方法的可解釋性給我們帶來了挑戰(zhàn)。

6825bb26-57d3-11eb-8b86-12bb97331649.png

深度學(xué)習(xí)可以減少對人的依賴,無需人工定義特征,但需要的數(shù)據(jù)量也就提高了,超聲就是很好的案例。

超聲圖像數(shù)據(jù)量大,類型多,沒有冠狀面和矢狀面,一般每個醫(yī)生之間無法達(dá)成共識,與醫(yī)生的操作手法有很大關(guān)系,恰恰適合深度學(xué)習(xí)。

687c8136-57d3-11eb-8b86-12bb97331649.png

超聲圖像大概有兩類:靜態(tài)和動態(tài)。靜態(tài)分為B超圖像、彈性成像;動態(tài)分為B超視頻、造影視頻。

68e7c91e-57d3-11eb-8b86-12bb97331649.png

我們在Medical Image Analysis上相繼發(fā)表兩篇文章,針對靜態(tài)圖像分割,建立深層局部注意金字塔神經(jīng)網(wǎng)絡(luò)模型,在多個超聲數(shù)據(jù)集中分割精度與專家手動分割近乎一致。

針對動態(tài)視頻追蹤,建立級聯(lián)單樣本可變形卷積神經(jīng)網(wǎng)絡(luò)模型,對超聲視頻中肝癌實(shí)現(xiàn)高精度實(shí)時自動追蹤。

6920b7d8-57d3-11eb-8b86-12bb97331649.png

69aef91c-57d3-11eb-8b86-12bb97331649.png

基于深度學(xué)習(xí)的影像智能診斷方面,我也將重點(diǎn)分享六個案例:

案例1:超聲影像組學(xué)-預(yù)測肝癌TACE治療預(yù)后

肝癌患者TACE預(yù)后差異大,術(shù)前缺乏有效預(yù)測手段的問題。

我們和中山大學(xué)一附院合作,針對139例肝癌患者術(shù)前超聲造影動態(tài)視頻建立了3D CNN網(wǎng)絡(luò),進(jìn)行視頻數(shù)據(jù)特征自動學(xué)習(xí),精準(zhǔn)預(yù)測肝癌TACE治療預(yù)后情況,精度可以達(dá)到0.93。

69e2b4aa-57d3-11eb-8b86-12bb97331649.png

6a469ace-57d3-11eb-8b86-12bb97331649.png

左邊是超聲造影圖像,深度學(xué)習(xí)可以將超聲動態(tài)視頻轉(zhuǎn)化為更直觀的分類視頻,紅色代表預(yù)后貢獻(xiàn)值,紅色越多代表預(yù)后效果好,藍(lán)色代表預(yù)后效果不好,上面這個人預(yù)后效果更好,即使不是醫(yī)生也可以看懂。深度學(xué)習(xí)把數(shù)據(jù)變成知識,縮短了醫(yī)生的學(xué)習(xí)曲線。

案例2:卷積神經(jīng)網(wǎng)絡(luò)預(yù)后模型-肝癌治療方案的選擇-個性化診療

早期肝癌(5公分以下)選擇肝切還是消融這個問題,我們以兩百多例消融和肝切患者術(shù)前超聲造影視頻及預(yù)后隨訪數(shù)據(jù)為基礎(chǔ),得到17%消融患者和25%肝切患者診療方式應(yīng)該互換,預(yù)后效果會更好,這就是個性化診療。

6a809422-57d3-11eb-8b86-12bb97331649.png

過去個性化診療憑大夫經(jīng)驗(yàn),根據(jù)化驗(yàn)結(jié)果和醫(yī)學(xué)經(jīng)驗(yàn)判斷該肝切還是消融,但每個人經(jīng)驗(yàn)是有限的。

使用卷積神經(jīng)網(wǎng)絡(luò)挖掘多相位超聲視頻特征,學(xué)習(xí)動脈期、門脈期、靜脈期超聲視頻圖像,然后集合Cox比例風(fēng)險損失函數(shù),就可以實(shí)現(xiàn)個性化診療,端到端進(jìn)行預(yù)后預(yù)測。

6abfc5c0-57d3-11eb-8b86-12bb97331649.png

通過AI計算,37位消融患者如果接受肝切治療,兩年P(guān)FS概率增加12%,56位肝切患者接受消融治療,2年后PFS概率增加15%。

通過大數(shù)據(jù)和回顧性數(shù)據(jù),可以對預(yù)后效果進(jìn)行前瞻性預(yù)測,借助人工智能實(shí)現(xiàn)治療方案的選擇和推薦。

6b02f91c-57d3-11eb-8b86-12bb97331649.png

案例3:遷移學(xué)習(xí)—肺癌EGFR基因突變預(yù)測

影像不僅能逼近病理,還能做基因預(yù)測。原來判斷肺癌有沒有EGFR基因突變,需要進(jìn)行穿刺。但穿刺風(fēng)險很大,可能會激活腫瘤加快擴(kuò)散,甚至穿刺可能帶動腫瘤轉(zhuǎn)移。

由于腫瘤異質(zhì)性影響,一針不一定穿到腫瘤核心位置或想穿的地方。如果拍個CT就可以知道基因類型,可以解決規(guī)避很多風(fēng)險,其中人工智能就可以發(fā)揮作用。

6b3d878a-57d3-11eb-8b86-12bb97331649.png

我們用遷移深度學(xué)習(xí)方法,對800余例肺腺癌患者多中心CT影像,進(jìn)行基因突變預(yù)測。對EGFR突變給出預(yù)測,將其展現(xiàn)成可理解的知識。前面例子紅色代表貢獻(xiàn)值,是深度學(xué)習(xí)給出的腫瘤中EGFR基因突變高可疑區(qū)域。

6b8cfcca-57d3-11eb-8b86-12bb97331649.png

對著高亮區(qū)域穿刺,效果會更好,也克服了前面的假陽性或假陽性結(jié)果,當(dāng)然我們更重要進(jìn)行無創(chuàng)的預(yù)測。

該成果發(fā)表在臨床類頂刊-歐洲呼吸上,第一作者是一個工科學(xué)生,這個方法解決問題的效果好,實(shí)現(xiàn)了從影像+人工智能的基因預(yù)測。

6ba7f778-57d3-11eb-8b86-12bb97331649.png

案例4:半監(jiān)督深度學(xué)習(xí)—卵巢癌復(fù)發(fā)時間預(yù)測

在卵巢癌復(fù)發(fā)時間預(yù)測中,我們還構(gòu)建了基于Dense連接的卷積自編碼器網(wǎng)絡(luò)。

通過半監(jiān)督深度學(xué)習(xí)挖掘缺乏隨訪CT影像的數(shù)據(jù),從大量無隨訪CT影像中學(xué)習(xí)腫瘤關(guān)鍵特征,少量隨訪數(shù)據(jù)和大量無隨訪CT影像得到復(fù)發(fā)風(fēng)險預(yù)測精度為C-Index=0.713;預(yù)測三年復(fù)發(fā)率AUC=0.772。

6be338c4-57d3-11eb-8b86-12bb97331649.png

6c1ddc86-57d3-11eb-8b86-12bb97331649.png

案例5:多模態(tài)特征融合—胃癌腹膜轉(zhuǎn)移預(yù)測

第五個案例是胃癌隱性腹膜轉(zhuǎn)移,這類疾病術(shù)前無法進(jìn)行影像判斷,給外科大夫帶來很大困難。

外科大夫只有通過手術(shù)看到后才發(fā)現(xiàn)胃癌腹膜轉(zhuǎn)移,按照NCCN指南開刀手術(shù)已經(jīng)沒有價值。

6c80dade-57d3-11eb-8b86-12bb97331649.png

以前,外科大夫根據(jù)經(jīng)驗(yàn)不知道是否有隱性腹膜轉(zhuǎn)移,癌癥患者開刀是首選,而我們可以用人工智能深度學(xué)習(xí)進(jìn)行精準(zhǔn)預(yù)測,通過構(gòu)建融合影像組學(xué)特征和深度學(xué)習(xí)特征的分期預(yù)測方法,大幅提高腹膜轉(zhuǎn)移診斷精度,對臨床漏診患者檢出率達(dá)85%,這個文章發(fā)表在腫瘤權(quán)威的雜志上。

6cbf3c02-57d3-11eb-8b86-12bb97331649.png

這個工作不僅發(fā)表了臨床類雜志文章,雜志同期還邀請臨床專家就深度學(xué)習(xí)述評,認(rèn)為其可以做為一個有效的胃癌診斷工具,比現(xiàn)有臨床分析和臨床特征更加精確。這也證明人工智能發(fā)表在醫(yī)學(xué)類雜志上的意義。

6d25855c-57d3-11eb-8b86-12bb97331649.png

這個工作當(dāng)年就寫入中國臨床腫瘤學(xué)會CSCO胃癌診療指南,讓更多病人避免白挨一刀,也讓更多醫(yī)生不用開一個沒有價值的刀。

6d9d2102-57d3-11eb-8b86-12bb97331649.png

案例6:全自動深度學(xué)習(xí)模型—新冠肺炎診斷

今年新冠疫情的影響下,我們對新冠肺炎的診斷進(jìn)行研究,針對新冠肺炎與其他肺炎的鑒別,我們構(gòu)建端到端深度學(xué)習(xí)進(jìn)行自動檢測。

深度學(xué)習(xí)模型自動關(guān)注肺內(nèi)結(jié)節(jié)和炎癥區(qū)域,實(shí)現(xiàn)全自動新冠肺炎診斷,在來自兩家中心獨(dú)立外部驗(yàn)證集上AUC均大于0.87。

6e33d872-57d3-11eb-8b86-12bb97331649.png

6e668e2a-57d3-11eb-8b86-12bb97331649.png

由于主要是鑒別新冠,研究采用了6家醫(yī)院1266例肺炎患者的CT影像(924例新冠,324例其他肺炎),還有另外兩家醫(yī)院做獨(dú)立外部驗(yàn)證集,AUC達(dá)到0.87和0.88。

該工作是深度學(xué)習(xí)大數(shù)據(jù)回歸的結(jié)果,使模型關(guān)注肺內(nèi)結(jié)節(jié)和炎癥區(qū)域,讓判斷更加準(zhǔn)確。

6eead31a-57d3-11eb-8b86-12bb97331649.png

6f1b04a4-57d3-11eb-8b86-12bb97331649.png

特異性新型卷積神經(jīng)網(wǎng)絡(luò)模型

特異性新型卷積神經(jīng)網(wǎng)絡(luò)模型這方面也有很多工作,針對醫(yī)學(xué)應(yīng)用,我們提出了多尺度池化方法,強(qiáng)化腫瘤內(nèi)部關(guān)鍵信息,把腫瘤瘤內(nèi)、瘤外、瘤周信息進(jìn)行多尺度提取,實(shí)現(xiàn)肺癌早期診斷,文章發(fā)表在Pattern Recognition雜志上。

6f5dd69e-57d3-11eb-8b86-12bb97331649.png

6feb9470-57d3-11eb-8b86-12bb97331649.png

我們還提出中心池化卷積神經(jīng)網(wǎng)絡(luò)分層量化腫瘤空間信息概念,與傳統(tǒng)池化、均勻量化相比,通過非均勻中心池化窗約束對瘤內(nèi)、瘤周、瘤外區(qū)域分別使用不同大小的池化窗,實(shí)現(xiàn)基于空間信息的特征篩選,得到更多特征信息。

7024ba66-57d3-11eb-8b86-12bb97331649.png

醫(yī)療人工智能的前沿?zé)狳c(diǎn)方向

第一,病理-影像大數(shù)據(jù)融合影像組學(xué)研究

前面是以影像為主進(jìn)行挖掘,病理圖像也是圖像,也很適合人工智能,如果把影像挖掘跟病理挖掘合二為一,效果肯定會1+1>2。

70b4e942-57d3-11eb-8b86-12bb97331649.png

案例:影像病理組學(xué)輔助直腸癌療效預(yù)測

這是第一個課題,從影像組學(xué)得到的結(jié)果,把影像組學(xué)+病理圖像結(jié)合,準(zhǔn)確率提高15%以上,說明利用多組學(xué)分析能解決更多問題。

70ddb55c-57d3-11eb-8b86-12bb97331649.png

第二,構(gòu)建醫(yī)學(xué)影像大數(shù)據(jù)

醫(yī)工交叉和人工智能醫(yī)學(xué)領(lǐng)域應(yīng)用基礎(chǔ)就是數(shù)據(jù)庫,這是中國的一個優(yōu)勢,美國TCGA數(shù)據(jù)庫做了很多年才達(dá)到1萬例。中國數(shù)據(jù)比較多,我們團(tuán)隊已經(jīng)積累了10萬多例腫瘤數(shù)據(jù)。

71127de6-57d3-11eb-8b86-12bb97331649.png

第三,研發(fā)醫(yī)學(xué)影像智能分析輔助診斷軟件

另外一個重要元素就是算法,把算法軟件集成在一起,形成算法庫,供醫(yī)生使用(開源),目前國內(nèi)外已經(jīng)有13萬人次下載。

717947d8-57d3-11eb-8b86-12bb97331649.png

我覺得未來AI還將進(jìn)化到4.0時代,從數(shù)據(jù)直接獲得知識。從數(shù)據(jù)到圖像就是為了供人觀看,但生成圖像,會有很多噪聲,丟掉很多信息。

718f7378-57d3-11eb-8b86-12bb97331649.png

未來如果人工智能從數(shù)據(jù)到知識,對于整個醫(yī)學(xué)影像和放射科都將是一種顛覆,目前國內(nèi)外都在研究。

最后總結(jié)一下,今天強(qiáng)調(diào)的是問題導(dǎo)向:源于臨床,找到特定問題;高于臨床,找到適合的人工智能方法;回歸臨床,讓人工智能解決問題,讓患者獲益。

這個工作必須醫(yī)工交叉,互補(bǔ)合作。很高興這幾年影像和超聲醫(yī)生,一直在嘗試,發(fā)表了一系列學(xué)術(shù)頂刊,這些工作將使醫(yī)療人工智能持續(xù)發(fā)展的生命力。

原文標(biāo)題:中科院田捷教授:重新審視醫(yī)學(xué)影像AI,哪些算法和研究最具生命力? | 萬字長文

文章出處:【微信公眾號:IoT科技評論】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

責(zé)任編輯:haq

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    33714

    瀏覽量

    274490
  • 人工智能
    +關(guān)注

    關(guān)注

    1804

    文章

    48511

    瀏覽量

    245369

原文標(biāo)題:中科院田捷教授:重新審視醫(yī)學(xué)影像AI,哪些算法和研究最具生命力? | 萬字長文

文章出處:【微信號:IoT_talk,微信公眾號:醫(yī)健AI掘金志】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    東軟集團(tuán)入選國家數(shù)據(jù)局?jǐn)?shù)據(jù)標(biāo)注優(yōu)秀案例

    近日,東軟飛標(biāo)醫(yī)學(xué)影像標(biāo)注平臺在國家數(shù)據(jù)局發(fā)布數(shù)據(jù)標(biāo)注優(yōu)秀案例集名單中排名第一(案例名稱“多模態(tài)醫(yī)學(xué)影像智能數(shù)據(jù)標(biāo)注平臺”)。評選專家認(rèn)為東軟案例取得了顯著成效,一方面,搶占了自主可控的數(shù)據(jù)標(biāo)注技術(shù)
    的頭像 發(fā)表于 05-09 14:37 ?208次閱讀

    智能算最具潛力的行業(yè)領(lǐng)域

    智能算最具潛力的行業(yè)領(lǐng)域 一、金融行業(yè) 智能風(fēng)控與精準(zhǔn)服務(wù)?:大型銀行通過算集群(6.27萬臺服務(wù)器)支撐AI模型訓(xùn)練,實(shí)現(xiàn)風(fēng)險預(yù)警、智能投顧等場景的規(guī)?;瘧?yīng)用,工商銀行已落地20
    的頭像 發(fā)表于 04-11 08:20 ?161次閱讀
    智能算<b class='flag-5'>力</b><b class='flag-5'>最具</b>潛力的行業(yè)領(lǐng)域

    中信建投報告泄密,AI硬件正在重塑醫(yī)療影像與IVD領(lǐng)域的未來

    《2025醫(yī)療科技趨勢報告》中預(yù)判的剛性需求。報告還指出,至2025年,醫(yī)學(xué)影像與體外診斷(IVD)領(lǐng)域?qū)⒂瓉?b class='flag-5'>AI應(yīng)用的深化期,其中AI硬件則會是推動這一變革的關(guān)鍵
    的頭像 發(fā)表于 02-25 18:03 ?307次閱讀
    中信建投報告泄密,<b class='flag-5'>AI</b>硬件正在重塑醫(yī)療<b class='flag-5'>影像</b>與IVD領(lǐng)域的未來

    人工智能(AI)為數(shù)據(jù)賦予新的生命力

    在不經(jīng)意間,數(shù)據(jù)已悄然融入我們生產(chǎn)生活的點(diǎn)點(diǎn)滴滴。我們不僅是數(shù)據(jù)的生產(chǎn)者,也成為數(shù)據(jù)的使用者,一個數(shù)據(jù)大規(guī)模生成與應(yīng)用的時代悄然拉開序幕。伴隨著人工智能(AI)的蓬勃發(fā)展,數(shù)據(jù)被賦予新的生命力,為
    的頭像 發(fā)表于 01-13 11:29 ?621次閱讀

    算法生命,自動化人工生命搜索已然顯現(xiàn)?

    」像生命體一樣運(yùn)作。 ASAL 其中一位研究者 Phillip Isola 近日,Sakana AI團(tuán)隊攜手麻省理工學(xué)院(MIT)、開放人工智能研究院(OpenAI)以及瑞士AI實(shí)驗(yàn)室IDSIA等機(jī)構(gòu)研究人員,共同提出了“自動化
    的頭像 發(fā)表于 12-31 10:54 ?307次閱讀
    從<b class='flag-5'>算法</b>到<b class='flag-5'>生命</b>,自動化人工<b class='flag-5'>生命</b>搜索已然顯現(xiàn)?

    NVIDIA助力西門子醫(yī)療加速醫(yī)學(xué)影像AI部署

    MONAI 集成現(xiàn)已上線西門子醫(yī)療 Digital Marketplace,加速 AI 在臨床工作流中的應(yīng)用落地。
    的頭像 發(fā)表于 12-06 11:51 ?653次閱讀

    東軟發(fā)布新一代醫(yī)學(xué)影像解決方案

    近日,東軟全新發(fā)布新一代醫(yī)學(xué)影像解決方案,以智能化為核心,以數(shù)據(jù)引擎為驅(qū)動,面向未來醫(yī)學(xué)影像行業(yè)的發(fā)展需求,全新定義醫(yī)學(xué)影像的產(chǎn)品價值,推動醫(yī)學(xué)影像信息化的全面升級與一體化融合。這是東
    的頭像 發(fā)表于 11-25 09:32 ?452次閱讀

    AI for Science:人工智能驅(qū)動科學(xué)創(chuàng)新》第4章-AI生命科學(xué)讀后感

    的深入發(fā)展。 3. 挑戰(zhàn)與機(jī)遇并存 盡管AI生命科學(xué)領(lǐng)域取得了顯著的成果,但也面臨著諸多挑戰(zhàn)。例如,數(shù)據(jù)隱私、算法偏見、倫理道德等問題都需要我們認(rèn)真思考和解決。同時,如何更好地將AI
    發(fā)表于 10-14 09:21

    Snapdragon Sight驍龍影像技術(shù)賦能智能手機(jī)卓越影像實(shí)力

    的鮮活生命力。在Snapdragon Sight驍龍影像技術(shù)賦能下,搭載驍龍移動平臺的手機(jī)以卓越影像實(shí)力,助力每一位熱愛生活的用戶用心記錄、隨心展示。
    的頭像 發(fā)表于 08-01 10:10 ?778次閱讀

    醫(yī)學(xué)影像存儲與傳輸系統(tǒng)源碼,PACS系統(tǒng)源碼

    ?醫(yī)學(xué)影像存儲與傳輸系統(tǒng)中,PACS部分主要提供醫(yī)學(xué)影像獲取、影像信息網(wǎng)絡(luò)傳遞、大容量數(shù)據(jù)存儲、影像顯示和處理、影像打印等功能。RIS主要提
    的頭像 發(fā)表于 07-18 16:31 ?610次閱讀
    <b class='flag-5'>醫(yī)學(xué)影像</b>存儲與傳輸系統(tǒng)源碼,PACS系統(tǒng)源碼

    圖像識別技術(shù)在醫(yī)療領(lǐng)域的應(yīng)用

    的應(yīng)用已經(jīng)成為推動醫(yī)療技術(shù)發(fā)展的重要力量。 二、醫(yī)學(xué)影像診斷 醫(yī)學(xué)影像診斷是圖像識別技術(shù)在醫(yī)療領(lǐng)域應(yīng)用最為廣泛和成熟的領(lǐng)域之一。醫(yī)學(xué)影像診斷主要包括X射線、CT、MRI、超聲等影像技術(shù)
    的頭像 發(fā)表于 07-16 10:48 ?1740次閱讀

    中偉視界:實(shí)時監(jiān)控與預(yù)警,礦山罐籠超員AI算法如何保障礦工生命安全?

    隨著礦山智能化的發(fā)展,罐籠超員AI算法在礦山安全管理中發(fā)揮著關(guān)鍵作用。本文詳細(xì)介紹了罐籠超員AI算法的工作原理、技術(shù)實(shí)現(xiàn)和應(yīng)用效果,并展望了未來的發(fā)展方向。通過實(shí)時監(jiān)控和預(yù)警,罐籠超員
    的頭像 發(fā)表于 07-12 08:54 ?550次閱讀

    影像AI運(yùn)用 #AI #影像測量 #中圖影像儀 #自動控制技術(shù)

    AI影像
    中圖儀器
    發(fā)布于 :2024年07月01日 16:20:07

    利用NVIDIA的nvJPEG2000庫分析DICOM醫(yī)學(xué)影像的解碼功能

    本文將深入分析 DICOM 醫(yī)學(xué)影像的解碼功能。AWS HealthImaging 利用 NVIDIA 的 nvJPEG2000 庫來實(shí)現(xiàn)此功能。
    的頭像 發(fā)表于 05-28 14:27 ?1210次閱讀
    利用NVIDIA的nvJPEG2000庫分析DICOM<b class='flag-5'>醫(yī)學(xué)影像</b>的解碼功能

    AI醫(yī)學(xué)影像企業(yè)深智透醫(yī)完成B+輪近千萬美元融資

    AI醫(yī)學(xué)影像領(lǐng)域的領(lǐng)軍企業(yè)深智透醫(yī)(Subtle Medical Inc.)近日成功完成了B+輪近千萬美元的融資,使其累計融資額超過五千萬美元。此次融資的注入,將為公司全球商業(yè)拓展和產(chǎn)品研發(fā)創(chuàng)新提供強(qiáng)大的資金支持。
    的頭像 發(fā)表于 05-14 10:08 ?705次閱讀