“您點一下這個網(wǎng)絡(luò)門診，醫(yī)生就可以在線幫您看病開藥了?！苯眨易《搭^的婁奶奶在孫子幫助下，第一次用手機完成了線上診療?！耙院筚I降血糖的藥不用專程跑一趟了，藥還能郵寄到家，真方便！”婁奶奶笑著說。

嘈雜的門診大廳、冗長的取藥隊伍、尋找不便的門診科室……類似的就醫(yī)體驗不少人都經(jīng)歷過。如今，溫州醫(yī)科大學(xué)附屬第一醫(yī)院打造了基于多模態(tài)大模型技術(shù)構(gòu)建全周期健康管理生態(tài)新體系的項目（以下簡稱多模態(tài)大模型），以上的經(jīng)歷將逐漸成為歷史。據(jù)悉，該項目是2024年“數(shù)據(jù)要素×”大賽浙江分賽二等獎作品，現(xiàn)已入圍全國總決賽。

多模態(tài)大模型是一種基于深度學(xué)習(xí)的機器學(xué)習(xí)技術(shù)，其核心思想是能整合處理不同形式的數(shù)據(jù)，通過學(xué)習(xí)不同模態(tài)之間的關(guān)聯(lián)與交互，實現(xiàn)更加智能化和綜合性的信息處理。

當(dāng)多模態(tài)大模型技術(shù)與智慧醫(yī)療相碰撞，又將擦出怎樣的火花？“利用這項技術(shù)，我們搭建了智能預(yù)就診、智能陪診等多個系統(tǒng)，結(jié)合患者人臉識別、就診進度、診療信息等數(shù)據(jù)，就可無感實現(xiàn)簽到、就診信息推送、特檢自動掛號等功能，以簡化就診流程，減少患者來院時間和次數(shù)?！睖刂葆t(yī)科大學(xué)第一臨床醫(yī)學(xué)院（信息與工程學(xué)院）、附屬第一醫(yī)院院長、黨委副書記張純武說。

在溫醫(yī)大附一院南白象院區(qū)的模擬診室，工作人員詳細(xì)演示了患者就診的流程——

診前階段，患者打開“溫醫(yī)一院”APP，點擊智能預(yù)約，即可進入“智能預(yù)就診系統(tǒng)”。該系統(tǒng)利用虛擬醫(yī)生進行AI問診，通過多輪、多形式的主動式交互，引導(dǎo)患者描述病情，并智能匹配相應(yīng)的科室和醫(yī)生，實現(xiàn)精準(zhǔn)預(yù)約。

就診當(dāng)天，智能陪診系統(tǒng)會提前推送消息提醒患者就診。當(dāng)患者到達(dá)醫(yī)院入口，大廳攝像頭自動進行無感人臉識別完成身份驗證，后臺同步自動簽到并推送相關(guān)就診信息及診室位置，結(jié)合院內(nèi)導(dǎo)航功能，引導(dǎo)患者迅速到達(dá)診室。

接診時醫(yī)生可對診前虛擬醫(yī)生AI預(yù)問診時生成的病歷草稿進行修改，或直接讓AI整理接診期間的醫(yī)患對話語音，重新生成病歷草稿，減少文書耗時，以留下更多的醫(yī)患溝通時間。

就診結(jié)束醫(yī)生開具處方，院內(nèi)藥房自動發(fā)藥機完成配藥后，系統(tǒng)會為患者推送最優(yōu)取藥窗口以及路徑導(dǎo)航，引導(dǎo)患者前往。

診后當(dāng)患者收到檢查檢驗云影像報告與圖像的推送時，同時將有人工智能自動輔助患者初步解讀報告結(jié)果。真正實現(xiàn)全周期健康管理。

“通過該項目，我們讓信息‘多跑腿’，患者‘少走路’。這不僅能提高醫(yī)療服務(wù)的效率，改善患者就醫(yī)感受，還確保了醫(yī)療信息的準(zhǔn)確性和安全性?！睆埣兾浣榻B，作為一家有著105年建院歷史的三甲醫(yī)院，溫醫(yī)大附一院年門急診量590萬人次，輻射浙南閩北贛東近3000萬人口。該項目實施以來，構(gòu)建了8148個檢驗檢查診斷知識庫與模型，累計服務(wù)醫(yī)生280.6萬人次，服務(wù)患者302.9萬人次。目前，患者從預(yù)約到離院的整個診中環(huán)節(jié)，平均用時從過去3小時縮短至30分鐘內(nèi)，同一患者來院次數(shù)同比下降3%。診前的溫馨提醒幫助減少18萬號源浪費，診中的檢查自動預(yù)約協(xié)助減少排隊量13.98萬人次，預(yù)住院率提高25%。患者看病體驗更好，醫(yī)院管理效率更高。

據(jù)介紹，溫醫(yī)大附一院將進一步完善院前健康管理平臺，利用患者數(shù)據(jù)構(gòu)建更加精準(zhǔn)的個性化健康管理方案，提升院前健康干預(yù)，幫助更多患者實現(xiàn)“治未病”。（記者 黃榮杰）