9月2日，基礎(chǔ)大模型（Foundation Model, FM）已成為醫(yī)療人工智能臨床應(yīng)用的核心驅(qū)動(dòng)力，但三大關(guān)鍵瓶頸始終制約其從實(shí)驗(yàn)室走向真實(shí)診療場(chǎng)景。第一，現(xiàn)有醫(yī)療FM多依賴單模態(tài)數(shù)據(jù)訓(xùn)練，難以像臨床醫(yī)生那樣融合多模態(tài)醫(yī)學(xué)信息實(shí)現(xiàn)跨模態(tài)對(duì)齊，無(wú)法適配實(shí)際診療中“多影像協(xié)同診斷”的需求；第二，多數(shù)研究?jī)H停留在回顧性數(shù)據(jù)驗(yàn)證階段，缺乏覆蓋多人群、多場(chǎng)景的前瞻性驗(yàn)證，更鮮有通過(guò)隨機(jī)對(duì)照試驗(yàn)（RCT）這一金標(biāo)準(zhǔn)的檢驗(yàn)，導(dǎo)致臨床落地可行性與實(shí)際價(jià)值大打折扣；第三，醫(yī)療領(lǐng)域復(fù)雜的倫理、法律與社會(huì)挑戰(zhàn)明確了AI的輔助定位，但現(xiàn)有研究多聚焦AI獨(dú)立診斷能力，忽視了人機(jī)協(xié)作模式在真實(shí)臨床流程中的實(shí)際意義和重要性。眼科學(xué)因常規(guī)應(yīng)用多模態(tài)影像檢查（如彩色眼底照、光學(xué)相干斷層掃描等），成為突破上述瓶頸的理想領(lǐng)域。

近日，清華大學(xué)團(tuán)隊(duì)與上海交通大學(xué)醫(yī)工交叉團(tuán)隊(duì)攻關(guān)，成功研發(fā)全球首個(gè)多模態(tài)視覺(jué)-語(yǔ)言眼部成像基礎(chǔ)大模型EyeFM，并構(gòu)建首個(gè)經(jīng)臨床驗(yàn)證的醫(yī)療AI大模型落地路線圖，為大模型臨床轉(zhuǎn)化提供“可復(fù)制、可推廣”的解決方案。

針對(duì)“如何通過(guò)眼成像刻畫(huà)慢性病發(fā)展規(guī)律、賦能智慧診療”這一全球熱點(diǎn)研究方向，研究團(tuán)隊(duì)依托超千萬(wàn)眼部影像及多模態(tài)診療數(shù)據(jù)，成功構(gòu)建多模態(tài)眼成像基礎(chǔ)大模型（EyeFM）。隨后，團(tuán)隊(duì)通過(guò)云端協(xié)同模式前瞻性部署基于該大模型的數(shù)字化平臺(tái)，并采用“人在回路”（Human-in-the-Loop）的臨床驗(yàn)證設(shè)計(jì)，在全球不同地域（涵蓋亞洲、北美、歐洲及非洲）的基層及眼科醫(yī)生中，前瞻性驗(yàn)證了該大模型對(duì)診療能力的提升效果。與此同時(shí)開(kāi)展了一項(xiàng)基于中國(guó)臨床真實(shí)場(chǎng)景的隨機(jī)臨床研究，實(shí)現(xiàn)臨床自適應(yīng)的健康指導(dǎo)與智能交互服務(wù)。此次全球合作研究，首次為AI醫(yī)學(xué)領(lǐng)域提供了大模型賦能基層與?？圃\療的高級(jí)別循證證據(jù)，同時(shí)為未來(lái)更多可臨床轉(zhuǎn)化的基礎(chǔ)模型研發(fā)與驗(yàn)證提供了全新范式，有效推動(dòng)該類新技術(shù)從實(shí)驗(yàn)室研究階段邁向臨床實(shí)際應(yīng)用場(chǎng)景。

EyeFM為基于眼成像的AI大模型落地全球診療提供中國(guó)方案

研究成果以“眼成像基礎(chǔ)大模型賦能臨床診療：隨機(jī)對(duì)照試驗(yàn)”（An eyecare foundation model for clinical assistance: a randomized controlled trial）為題，于8月28日發(fā)表于《自然·醫(yī)學(xué)》（Nature Medicine）。

清華大學(xué)醫(yī)學(xué)院教授黃天蔭和上海交通大學(xué)計(jì)算機(jī)學(xué)院教授盛斌為論文共同通訊作者。清華大學(xué)八年制臨床醫(yī)學(xué)2017級(jí)學(xué)生吳漪瀾，上海交通大學(xué)計(jì)算機(jī)學(xué)院錢(qián)波、李庭瑤，清華大學(xué)醫(yī)學(xué)院秦義明，上海市交通大學(xué)醫(yī)學(xué)院管洲榆，上海市保健醫(yī)療中心主任醫(yī)師陳婷麗，美國(guó)俄勒岡健康與科學(xué)大學(xué)Yali Jia，美國(guó)俄亥俄州立大學(xué)張平以及清華大學(xué)醫(yī)學(xué)院曾典為論文共同第一作者。研究得到北京市視覺(jué)科學(xué)與轉(zhuǎn)化醫(yī)學(xué)研究中心、新加坡國(guó)立眼科中心等機(jī)構(gòu)專家的聯(lián)合指導(dǎo)和支持。