聯影如何用AI改變診療?
2025年4月9日,聯影在“uAInnovation2025聯影創新大會”上發佈了自主研發的醫療專用多模態大模型“元智(uAI NEXUS)”,並推出覆蓋診斷、治療、管理等多個場景的十餘款醫療智能體產品。
融合了多模態大模型與智能體應用的聯影,正在重塑醫療工作方式。
多模態醫療大模型的技術突破
此次聯影發佈的“元智”醫療大模型,以垂域專精、私域知識微調、多模態融合等技術路徑構建,融合了文本、影像、視覺與語音等多種數據模態,實現了對醫療場景的高效適配。相較於通用大模型,醫療垂類大模型在臨牀場景中的準確性、穩定性和實用性更具優勢。
以聯影的影像診斷場景爲例,“元智”影像大模型訓練於數千萬級醫學影像數據與數十萬級醫療標註數據,支持包括胸部CT、磁共振、超聲、核醫學等多種模態。數據顯示,該影像大模型可在單次胸部CT掃描中,實現對37種胸部常見疾病的精準檢出,綜合平均AUC值達0.92,較此前行業最優模型(AUC約0.76)提升超過10%。
在醫療文本模態方面,聯影利用DeepSeek等通用大模型基礎進行微調,模型規模壓縮至原模型體積的四分之一,極大提高了推理效率與部署靈活性,可實現醫院本地輕量化部署。這種本地部署模式有效解決了醫療數據安全和隱私保護的問題。
視覺與語音模態方面,聯影分別構建了醫療視覺與語音大模型,進一步拓寬醫療AI的應用邊界。其中,視覺模型在手術導航和人體器官精準建模上表現突出;語音大模型則在複雜環境中的醫療術語識別和多人對話場景下的聲紋識別取得突破,語音錯誤率明顯優於通用模型。
此外,“元智”還具備醫療混合多模態模型能力,可實現文本、影像、視頻數據的統一空間映射,形成高度協同的醫療智能應用,例如皮瓣移植手術中影像與實時視頻數據的精準融合與實時導航。這種多模態融合能力顯著提升了醫療場景的臨牀實用性與精度表現。
從單點工具到醫療智能體
在“元智”多模態大模型平臺的基礎上,聯影此次推出了多個具體場景的醫療智能體,推動醫療AI從單一效率工具向全面智能協作轉型。
以影像診斷智能體(uMetaImaging)爲例,其功能已超越傳統專病影像模型,具備更廣泛疾病覆蓋和更高診斷效率,同時優化了醫生的工作流程。影像智能體在實際應用中,可將醫生的閱片時間減少約50%,並實現了診斷報告的語音智能自動生成,顯著提升醫生工作效率。
在手術場景中,聯影開發的外科智能體(如uAI MERITS多元手術智能體)將視覺、語音、視頻數據集成到手術實時導航系統中,可實時呈現術區解剖結構,提供精準手術器械定位指導,並通過智能機械臂輔助器械傳遞,實現外科手術的高精準性與實時性需求。
此外,在患者服務與醫院管理領域,聯影還推出了病歷智能助手、智能客服系統與設備管理智能體。這些智能體在實際應用中展現出良好效果,以病歷助手爲例,已在復旦大學附屬中山醫院臨牀落地,實現了病歷撰寫效率由原來每例約20分鐘降低至5分鐘以內,極大優化了醫療文書的書寫流程。
生態協同的戰略佈局
此次發佈的背後,聯影亦展示了其持續的生態戰略佈局。通過與復旦大學附屬中山醫院、中山大學腫瘤防治中心等頭部醫院的深入合作,聯影實現了醫療AI技術與醫院真實場景的緊密結合,加速了醫療智能產品的快速迭代與臨牀驗證。
目前,聯影智能產品已在全國超過3000家醫院實現部署,涵蓋診斷、治療、管理多領域的智能體應用,有效提高了醫療服務的整體效率與質量。在此生態中,醫療數據在不同場景與環節中流通和沉澱,通過持續反饋和優化形成閉環,推動智能體與醫療設備性能的不斷迭代升級。
聯影董事長薛敏在大會演講中強調:對AI的擁抱已經不是單點情況而是普遍的現象,所有的行業都在積極擁抱人工智能大模型。在醫療領域裡它會帶來很大變化,這只是剛剛開始,未來將轉向生態協同,在醫療行業裡走出一條新路。
聯影此次戰略調整與新產品佈局即體現了這種思路,強調醫療智能生態的整體建設與產業協同能力,致力於推動AI醫療從技術積累走向臨牀場景真正應用。
醫療智能化的未來挑戰與展望
聯影此次發佈的多模態大模型及醫療智能體產品,在技術成熟度與臨牀效果上展示出顯著的優勢,然而醫療智能化在更廣泛場景的落地仍然面臨諸多挑戰。例如,如何確保大規模臨牀數據應用的安全性與合規性、如何提升模型對罕見疾病及複雜病例的泛化能力、如何避免AI模型的臨牀誤判與錯誤推理等問題,都是未來醫療AI應用深入實踐必須直面的關鍵難題。
聯影智能聯合創始人、聯席CEO周翔 、沈定剛在會上指出,目前像DeepSeek這樣推理的大模型在複雜的醫療場景裡它還有幻覺同樣跟我們醫生相比整個性能還有一定差距。
因此,聯影的多模態醫療大模型與智能體應用場景將通過專業領域的持續微調與訓練,以逐步增強模型可靠性與臨牀安全性。
聯影在此次發佈會上展示的多模態大模型與智能體應用,代表了醫療智能化技術在精準診斷、手術輔助與醫院管理方面的明顯進展,也印證了醫療領域從單點AI應用向全面智能協作生態轉型的趨勢。
未來,隨着多模態融合能力的不斷深化與生態協同戰略的持續推進,這種趨勢有望進一步拓寬AI醫療技術的應用範圍,並推動全球醫療產業的全面智能化升級。