本書全面介紹了人工智能在醫(yī)學中的應用,包括醫(yī)學影像和分子圖像的輔助診斷、生物電信號的監(jiān)測、基于內(nèi)鏡的檢查和治療、輔助手術規(guī)劃和手術導航,以及輔助康復治療和新藥開發(fā)等,同時分析了在這些應用中的實際案例。此外,還概括性地介紹了人工智能應用于醫(yī)學領域的發(fā)展過程、臨床研究方法,以及醫(yī)學中特別關注的多中心泛化和倫理、規(guī)范等。
本書旨在輔助醫(yī)務人員參與創(chuàng)新,協(xié)助科研、產(chǎn)業(yè)人員深入臨床,所選案例多來自與醫(yī)院或醫(yī)療中心的合作,具有很高的參考價值?傊,本書是一本實用性極強的了解并掌握如何將人工智能技術融入醫(yī)學診療過程中的參考書,可供醫(yī)學生、生物醫(yī)學工程專業(yè)人員等使用。
人工智能的熱潮再度涌來,在各項技術快速發(fā)展的當下,其改變了人類生活的方方面面,在醫(yī)學中也不例外。本書作者團隊多年來深耕于人工智能軟件和硬件在醫(yī)學中的應用領域,已產(chǎn)出多項重要成果。他們整理、歸納并總結了多年的科研、教學經(jīng)驗和研究成果,匯集于本書中。本書介紹了人工智能醫(yī)學應用的基礎知識和人工智能在多種醫(yī)學情境中的應用,并且關注了其應用時的局限性,以及應注意的倫理和規(guī)范等。閱讀本書,讀者可全面了解人工智能在醫(yī)學中的應用,進而開拓自己的研究。
人工智能(artificial intelligence)在主流市場沉寂了幾十年之后,自2012年開始,隨著深度學習(也被稱為深度神經(jīng)網(wǎng)絡)的發(fā)展逐步得到廣泛應用,并且在各個領域展示了出色的性能;更重要的是,深度學習及基于深度學習的預訓練大模型縮小了人工智能專家和應用開發(fā)者之間的差距,使所有開發(fā)者能站在同一起跑線上,這對于人工智能在醫(yī)學中的應用尤其重要。近兩年,ChatGPT影響力極速擴大、用戶迅速增長,又將人工智能推向主流市場。在可預期的將來,人工智能的前景非常廣闊。
從20世紀80年代開始,就有人不斷嘗試用各種機器學習和人工智能的方法來輔助醫(yī)生做各種診斷,但是由于效果不佳,只留下了科研論文這類成果,并沒有在醫(yī)療中得到真正使用。在嘗試了各種方法之后,醫(yī)生們也幾乎放棄了計算機輔助診斷的想法。我在2013年之前走訪了美國幾家醫(yī)院,這些醫(yī)院中的放射科主任對于計算機輔助診斷的應用前景都表達了悲觀的看法。直到2012年以大數(shù)據(jù)驅(qū)動的深度神經(jīng)網(wǎng)絡的出現(xiàn)才逐漸改變了從業(yè)者的態(tài)度。這種神經(jīng)網(wǎng)絡在自然圖像識別方面取得了驚人的準確率,并已用于醫(yī)學圖像和醫(yī)學影像分析任務中。相比于自然圖像的識別,基于醫(yī)學影像的輔助診斷任務看起來更適合深度學習的模型,因為訓練模型的過程就如同訓練一個年輕醫(yī)生,需要在有經(jīng)驗的醫(yī)生的指導下基于案例進行長時間的大量訓練。以有監(jiān)督的深度學習為例,在訓練過程中也需要大量專家標注的數(shù)據(jù)。深度學習在醫(yī)學圖像和醫(yī)學影像方面的成功應用不僅催生出大量科研成果,也孕育出許多人工智能相關的醫(yī)療公司,它們多始于對醫(yī)學影像進行分析的需求。人工智能在醫(yī)學圖像和醫(yī)學影像分析領域的快速發(fā)展與醫(yī)學數(shù)字成像和通信標準的普及密不可分,醫(yī)生讀片和書寫報告的影像存儲與傳輸系統(tǒng)(picture archiving and communication system,PACS)也發(fā)揮了重要作用。深度學習在醫(yī)學圖像和醫(yī)學影像分析領域逐步取得突破的同時,人工智能在其他醫(yī)療領域中也漸漸得到了應用,如對電子病歷數(shù)據(jù)、醫(yī)學檢驗數(shù)據(jù)、基因數(shù)據(jù)、行為數(shù)據(jù)、手術視頻數(shù)據(jù)、生理參數(shù)監(jiān)測數(shù)據(jù)等數(shù)據(jù)的分析;應用目的也更加多樣化,覆蓋了疾病預測、輔助診斷、輔助治療、手術規(guī)劃、預后預測、康復等各醫(yī)療階段。
同時,醫(yī)療對于人工智能技術的要求也越來越高,深度學習的最新技術均快速體現(xiàn)在各種人工智能醫(yī)療應用的科研成果中。醫(yī)療對人工智能的特殊要求包括:①保持模型在多中心使用時的準確性和魯棒性;②能夠綜合多模態(tài)、多類型的數(shù)據(jù)進行診斷和治療;③模型可以進行弱監(jiān)督和無監(jiān)督學習,減小對于標注數(shù)據(jù)量的需求;④模型的結果有可解釋性,便于醫(yī)生理解和給患者解釋;⑤能夠無縫切入醫(yī)生的工作流,以減少醫(yī)生用于熟悉操作的時間成本。除了應用于臨床醫(yī)學,人工智能在基礎醫(yī)學研究、體外診斷和新藥開發(fā)方面也被采用,如利用深度學習中的增強學習模型來找到基因變異的位點、在巨量的三維結構組合中預測蛋白質(zhì)折疊的結構、精準分類體外診斷數(shù)據(jù)、在多維度數(shù)據(jù)中找到生物標志物、在基因數(shù)據(jù)庫和化合物數(shù)據(jù)庫中找到新藥靶點等。
我們課題組從2013年開始采用新型的機器學習和深度學習方法進行研究,我們認為科研的使命就是為技術的實際使用和商業(yè)化應用探路,因此十余年來我們探索了深度學習在各醫(yī)療領域中應用的可能性,包括人工智能基于醫(yī)學圖像和影像的輔助診斷、基于細胞和分子層面數(shù)據(jù)的輔助診斷、基于內(nèi)鏡及其視頻數(shù)據(jù)的輔助治療和診斷、手術規(guī)劃和預后預測、康復指導,以及新藥開發(fā)等,此外我們還深入研究了多模態(tài)數(shù)據(jù)融合、多中心泛化模型和數(shù)據(jù)安全等在模型應用中普遍關注的問題。
2019年,在上海交通大學醫(yī)學院研究生培養(yǎng)辦公室的推動之下,我們在人工智能與醫(yī)學課程中向醫(yī)學博士研究生介紹人工智能技術,很受歡迎。這門課程中,我們不僅教授了人工智能基于多種醫(yī)學數(shù)據(jù)的輔助診斷、輔助治療和輔助康復等,還講述了人工智能應用中的倫理、規(guī)范和醫(yī)療數(shù)據(jù)的重要性等。課程結束時,來自基礎醫(yī)學和臨床醫(yī)學各二級學科等的學生們在講師和助教幫助下,將完成一個人工智能醫(yī)療相關的選題設計和實踐,學生們可以基于各自專業(yè)的問題和數(shù)據(jù)設計選題,然后用人工智能的方法來解決,修完這門課程的同學們基本上都能獨立地用好人工智能這個工具,這將為他們未來的科研和科研成果向臨床轉化打下基礎。
在講述人工智能與醫(yī)學課程的幾年中,我們發(fā)現(xiàn)迫切需要一本能較全面地介紹人工智能醫(yī)學應用的參考書,這是因為國內(nèi)外最近幾年出版的人工智能醫(yī)療相關的圖書、教材多以醫(yī)學影像相關內(nèi)容為主,不夠全面,而且或是太淺顯,或是包含過多深奧的數(shù)學推導過程等。因此,我們便根據(jù)多年的科研工作和教學經(jīng)驗編寫了本書。本書首先介紹了人工智能及其醫(yī)學應用中必要的背景知識和基礎理論,然后分析了人工智能的各種醫(yī)學應用,最后對人工智能醫(yī)療器械在實際應用中需要注意的數(shù)據(jù)安全、多中心泛化、倫理和規(guī)范等方面進行了闡述。每章均由對背景知識的綜述和相關應用案例組成,這些案例大部分來自我們課題組的科研課題。本書介紹的人工智能模型、算法和思路也許不都是最新的,但是都是各個領域發(fā)展過程中的重要成果,我們相信它們會使讀者有所啟發(fā)。
我們希望在讀完本書之后,讀者們可以對人工智能的醫(yī)學應用有一個較廣泛、深入的了解;希望醫(yī)生和醫(yī)學生讀者能夠快速掌握該領域的概況和方法,了解人工智能在實際應用中的重要意義和局限性,以便在今后的工作中用好這個工具;希望有志于從事相關行業(yè)工作的創(chuàng)業(yè)者、工程師和工學生們可以深度了解人工智能在醫(yī)療中的應用實例,以及應用中需要注意的地方,促進研究與理論轉化。當然,現(xiàn)在人工智能的發(fā)展非常迅速,在ChatGPT的引爆之下,各種通用人工智能算法將不斷涌現(xiàn)。在這個快速發(fā)展的領域中,希望本書能夠持續(xù)給予讀者幫助。
錢大宏
2024年11月
主編:錢大宏,教授,博士生導師。上海交通大學生物醫(yī)學工程學院先進醫(yī)療芯片研究所所長,上海交通大學醫(yī)學院附屬瑞金醫(yī)院核醫(yī)學科廣慈雙聘教授。主要研究人工智能軟件和硬件在醫(yī)療方面廣泛的應用。本科畢業(yè)于浙江大學,后赴美國德克薩斯大學奧斯汀分校就讀,隨后在哈佛大學獲得應用科學的博士學位。曾經(jīng)在美國的Dallas Semi、ADI、OmniVision等上市公司擔任高級工程師、技術經(jīng)理以及系統(tǒng)工程副總裁等職位,并且參與過兩家高科技公司的創(chuàng)立。
第一章 人工智能及其醫(yī)學應用概論1
第一節(jié) 人工智能發(fā)展簡介1
第二節(jié) 人工智能的基本概念、原理和算法 3
第三節(jié) 人工智能在醫(yī)學中的應用 18
第二章 醫(yī)學人工智能臨床研究方法 29
第一節(jié) 基本研究流程 29
第二節(jié) 研究方案設計要素 31
第三節(jié) 研究人群與數(shù)據(jù)集 33
第四節(jié) 模型研究的臨床結局評估 40
第五節(jié) 模型評價指標 41
第六節(jié) 模型比較的研究類型 48
第三章 人工智能在醫(yī)學影像診斷中的應用 51
第一節(jié) 概述 51
第二節(jié) 醫(yī)學影像分類 52
第三節(jié) 醫(yī)學影像檢測 65
第四節(jié) 醫(yī)學影像分割 71
第五節(jié) 醫(yī)學影像的多模態(tài)診斷 79
第四章 人工智能在分子醫(yī)學圖像中的應用 95
第一節(jié) 分子醫(yī)學圖像概述 95
第二節(jié) 人工智能在病理醫(yī)學圖像智能分析中的應用 97
第三節(jié) 染色體智能核型分析113
第五章 人工智能在生物電信號監(jiān)測中的應用128
第一節(jié) 生物電信號數(shù)據(jù)128
第二節(jié) 生理狀態(tài)監(jiān)護與輔助診斷131
第三節(jié) 腦機接口和人機交互144
第六章 人工智能在內(nèi)鏡中的應用155
第一節(jié) 人工智能在消化內(nèi)鏡檢查中的應用156
第二節(jié) 人工智能在消化內(nèi)鏡導航中的應用169
第七章 人工智能在手術規(guī)劃和導航中的應用178
第一節(jié) 手術重建、規(guī)劃及導航概述 178
第二節(jié) 人工智能在肺部手術中的應用182
第三節(jié) 人工智能在正畸-正頜聯(lián)合治療中的應用 189
第八章 人工智能在康復中的應用201
第一節(jié) 概述201
第二節(jié) 人工智能在骨科術后康復中的應用203
第三節(jié) 神經(jīng)康復213
第九章 人工智能在新藥開發(fā)中的應用229
第一節(jié) 基于人工智能的藥物篩選229
第二節(jié) 基于人工智能的藥物設計238
第三節(jié) 基于人工智能的藥物重定位244
第四節(jié) 藥物研發(fā)中的可解釋性模型248
第十章 人工智能醫(yī)療模型的多中心泛化251
第一節(jié) 多中心泛化的現(xiàn)實挑戰(zhàn)251
第二節(jié) 域泛化的研究現(xiàn)狀255
第三節(jié) 域泛化的實際應用案例263
第十一章 醫(yī)療人工智能大模型272
第一節(jié) 大模型概述272
第二節(jié) 大模型在醫(yī)療領域中的應用274
第三節(jié) 大模型的實際應用案例280
第十二章 人工智能醫(yī)療相關數(shù)據(jù)、倫理和規(guī)范 289
第一節(jié) 人工智能醫(yī)學數(shù)據(jù)處理289
第二節(jié) 人工智能醫(yī)療相關倫理及其技術應對297
第三節(jié) 人工智能相關規(guī)范300
致謝306