轉(zhuǎn)載自:解放日?qǐng)?bào)
在人工智能大模型推動(dòng)智能體快速發(fā)展的當(dāng)下,智能體將如何改變醫(yī)療行業(yè)?昨天,在2025中國國際醫(yī)療器械展覽會(huì)舉行同期,聯(lián)影創(chuàng)新大會(huì)發(fā)布了“元智”醫(yī)療大模型,并同步推出覆蓋影像診斷、臨床治療、醫(yī)學(xué)科教、醫(yī)院管理、患者服務(wù)等多個(gè)場(chǎng)景的十余款醫(yī)療智能體。“基于大模型的智能體將重構(gòu)未來醫(yī)療范式。”聯(lián)影集團(tuán)董事長薛敏說。
垂類大模型適配醫(yī)療場(chǎng)景
如今,越來越多的醫(yī)院已完成deepseek等國產(chǎn)大模型本地化部署,但在很多醫(yī)療場(chǎng)景中,通用大模型的性能還遠(yuǎn)未達(dá)到臨床應(yīng)用要求,因此需要專業(yè)團(tuán)隊(duì)打造垂類多模態(tài)大模型,以滿足復(fù)雜多樣的醫(yī)療需求。為此,聯(lián)影憑借在醫(yī)學(xué)影像設(shè)備和“人工智能+醫(yī)療”領(lǐng)域的創(chuàng)新優(yōu)勢(shì),已研發(fā)出“元智”醫(yī)療大模型(uai nexus)。它吸收了通用大模型在處理自然語言、長文本方面的最新成果,并通過垂域?qū)>⑺接蛑R(shí)微調(diào),實(shí)現(xiàn)了與醫(yī)療場(chǎng)景的深度適配。
據(jù)介紹,這是一個(gè)包含文本、語音和視覺理解能力的多模態(tài)大模型。“元智”醫(yī)療文本大模型接入deepseek后,它的復(fù)雜推理和文本處理能力大幅提升,能高效響應(yīng)醫(yī)療場(chǎng)景需求,而且參數(shù)量較小,適合醫(yī)院進(jìn)行本地化部署。語音大模型具有醫(yī)療術(shù)語精準(zhǔn)識(shí)別與智能聲紋分析能力,經(jīng)過豐富的醫(yī)療場(chǎng)景語料訓(xùn)練,即便在嘈雜環(huán)境和復(fù)雜對(duì)話中,仍能精準(zhǔn)識(shí)別科室、檢查、藥品和疾病癥狀等專業(yè)術(shù)語,支持多人同時(shí)對(duì)話場(chǎng)景下的身份識(shí)別,與醫(yī)生高效協(xié)作完成任務(wù)。
視覺大模型在4d建模等醫(yī)療場(chǎng)景中,可通過高速電影級(jí)渲染技術(shù),精準(zhǔn)描繪人體器官和組織分割面,展現(xiàn)出臨床與科研價(jià)值。
醫(yī)療影像大模型由數(shù)千萬醫(yī)療影像數(shù)據(jù)、數(shù)十萬醫(yī)療級(jí)精細(xì)標(biāo)注數(shù)據(jù)訓(xùn)練而成,支持10個(gè)以上影像模態(tài)、約300種影像處理任務(wù)。在處理復(fù)雜病灶診斷、器官分割等關(guān)鍵任務(wù)上,它的精準(zhǔn)度測(cè)評(píng)超過95%,性能超越此前的行業(yè)最優(yōu)模型。
智能體服務(wù)不同醫(yī)療需求
根據(jù)不同醫(yī)療場(chǎng)景,“元智”醫(yī)療大模型已孕育出十余款醫(yī)療智能體。
在影像診斷領(lǐng)域,“影像全智能體”打破了傳統(tǒng)ai單病種、單應(yīng)用的局限,憑借海量跨模態(tài)醫(yī)學(xué)影像數(shù)據(jù)與文本數(shù)據(jù)訓(xùn)練,構(gòu)建起一套更全面、專業(yè)的影像智能體診斷范式。在放射科,基于影像大模型的智能體僅需一次胸部ct掃描,就能自動(dòng)進(jìn)行胸腔、食管、縱隔、氣管與支氣管、肺部、骨骼、心臟與大血管等部位37種胸部ct常見病種和異常的檢出,其在“一掃多查”性能上超越了此前業(yè)內(nèi)最好的模型。
這個(gè)智能體還顛覆了傳統(tǒng)的閱片工作流程。過去,醫(yī)生在影像工作站完成病灶分析后,要切換到獨(dú)立報(bào)告系統(tǒng)進(jìn)行文本錄入,操作流程煩瑣。而現(xiàn)在,醫(yī)生可通過語音方式完成“診斷報(bào)告智能書寫”,從而提高診斷效率。
“多元手術(shù)智能體”將在臨床治療場(chǎng)景中成為醫(yī)生的得力助手。以外科手術(shù)為例,這個(gè)智能體會(huì)整合視頻、語音、圖像等多模態(tài)數(shù)據(jù),構(gòu)建起智慧手術(shù)室的眼、腦、手協(xié)同體系。其中,uai avatar作為智能大腦,可通過醫(yī)生語音指令實(shí)時(shí)操控手術(shù)設(shè)備和機(jī)械臂;uai vision是一雙慧眼,提供精準(zhǔn)的空間定位支持,實(shí)時(shí)感知手術(shù)器械位置;高精度機(jī)械臂能聽從指揮,靈活地完成器械傳遞。“這是手術(shù)智能體的創(chuàng)新應(yīng)用,展現(xiàn)出從ar導(dǎo)航到器械傳遞的全流程智能化協(xié)同,能滿足復(fù)雜手術(shù)對(duì)實(shí)時(shí)性和精確性的極致需求。”聯(lián)影智能負(fù)責(zé)人說。
聯(lián)影還推出了應(yīng)用于患者服務(wù)、醫(yī)院管理等場(chǎng)景的智能體。“有愛小山—病歷助手”可一鍵生成多種類型的醫(yī)療報(bào)告,已在復(fù)旦大學(xué)附屬中山醫(yī)院、中山大學(xué)腫瘤防治中心落地應(yīng)用。“設(shè)備管理智能體”能幫助醫(yī)院管理者全方位掌握設(shè)備的生命周期和運(yùn)行情況,對(duì)可能發(fā)生的設(shè)備運(yùn)行故障作出預(yù)警。
來源:上海經(jīng)信委,若涉及侵權(quán),請(qǐng)立刻聯(lián)系刪除