近日,浙江大學(xué)醫(yī)學(xué)院附屬邵逸夫醫(yī)院(下稱“浙大邵逸夫醫(yī)院”)在全國率先推出基于大語言模型的智能醫(yī)生助理,為公立三甲醫(yī)院在提升智慧醫(yī)療水平、提高醫(yī)生工作效率和改善患者服務(wù)體驗方面再次作出先行探索。
當(dāng)前人工智能正以前所未有的速度和廣度影響著人類社會的方方面面。大語言模型作為當(dāng)前人工智能的前沿技術(shù),引領(lǐng)著新時代人工智能開發(fā)新范式新變革,是拓寬醫(yī)學(xué)發(fā)展空間的重要手段,更是醫(yī)療機(jī)構(gòu)提升服務(wù)質(zhì)量的必然選擇。邵逸夫醫(yī)院基于醫(yī)學(xué)大語言模型上線智能醫(yī)生助理,是希望能充分運用人工智能技術(shù)的力量,為患者提供更精準(zhǔn)、更智能、更個性化、更有溫度的醫(yī)療服務(wù),為高質(zhì)量打造中國式現(xiàn)代化標(biāo)桿醫(yī)院貢獻(xiàn)力量。 “掃一掃二維碼,提前看醫(yī)生?!边M(jìn)入候診區(qū),吳先生就聽到護(hù)士的溫馨提醒,他拿出手機(jī)掃碼進(jìn)入小程序。通過模擬臨床醫(yī)生診療思維來提問和引導(dǎo),在多輪一問一答的語音對話中,吳先生很快就完成了預(yù)診的病情錄入。智能醫(yī)生助理根據(jù)對話內(nèi)容快速完成主訴癥狀、伴隨癥狀、診療情況、既往史、家族史等醫(yī)療信息的采集,5秒自動生成了預(yù)問診病歷,并同步至醫(yī)生工作站,方便醫(yī)生在患者進(jìn)入診室前提前了解患者病史。“醫(yī)生助理”的上線,讓患者的等待時間變得更有價值?!罢娴奶悄芰?!”吳先生體驗后連連稱贊,“以前我面對醫(yī)生的時候都會緊張得講不清楚話,有時還會遺忘一些關(guān)鍵信息?,F(xiàn)在有了‘小助理’就方便太多了,問的問題不僅細(xì)致還專業(yè),連抽煙、喝酒、家族史的問題都考慮到了。操作也簡單,只需按住按鈕說話,聲音就能一字不落地變成文字,不小心遺漏了信息也沒關(guān)系,還可以接著補(bǔ)充,讓我很放心。”醫(yī)生助理讓醫(yī)生在問診時更專注于與患者的溝通交流,醫(yī)生只需要按下“醫(yī)生助理”的錄音鍵,就能自動記錄與患者間的溝通對話。它可以理解臨床語義,將語音轉(zhuǎn)化成結(jié)構(gòu)化的醫(yī)療文本,并自動生成規(guī)范化的電子病歷,大大提高醫(yī)生問診的效率和質(zhì)量。
大語言模型的應(yīng)用讓我們迎來了醫(yī)療新時代,也對智慧醫(yī)療有了全新思考和理解。從診前的預(yù)問診,到診中的語音實時收錄與臨床語義解析,再到診后的隨訪、復(fù)診提醒等,智能醫(yī)生都能夠為患者和醫(yī)生提供服務(wù)。它既為醫(yī)院的發(fā)展建設(shè)提供技術(shù)支撐,又減輕了醫(yī)生工作負(fù)擔(dān),改善患者就診流程,這是三方的共贏。
吳先生走出診室后感嘆:“以前看病的時候,醫(yī)生一直盯著電腦,一邊問話一邊敲字,讓我有一種看病不夠仔細(xì)的感覺。但這次不一樣,醫(yī)生全程都看著我,和我交流,而且非常耐心地聽我敘述病情,我感覺很安心,和醫(yī)生的溝通得也很順暢?!?/span>
“醫(yī)生助理”應(yīng)用上線的背后,是六大技術(shù)的強(qiáng)硬支撐。
- 醫(yī)療大語言模型的持續(xù)調(diào)優(yōu)
- 醫(yī)學(xué)語音引擎的智能識別與轉(zhuǎn)化
AIGC格式化病歷文本生成
當(dāng)大模型踏入醫(yī)療行業(yè)與人類醫(yī)生一較高下時,它能達(dá)到什么水平?
就在最近,醫(yī)學(xué)頂刊BMJ便給出了這樣一個結(jié)論:在遵循公認(rèn)的臨床抑郁癥治療標(biāo)準(zhǔn)方面,先進(jìn)大模型可能比醫(yī)生要強(qiáng)!一直以來,醫(yī)療行業(yè)都被視為AI落地的重要領(lǐng)域。在深度學(xué)習(xí)浪潮剛剛興起之時,深度學(xué)習(xí)三巨頭之一Hinton就說出了名言:5年內(nèi)AI可以取代放射科醫(yī)生。盡管這個表達(dá)有些激進(jìn),但它揭露了一個事實,至少在科研層面,AI和醫(yī)療的結(jié)合是非常被看好的。在過去一段時間以來,AI醫(yī)療場景不斷開拓,比如利用CV算法識別病灶、檢測心電圖等。科技巨頭們都緊跟趨勢,如微軟、谷歌、IBM等都在持續(xù)投入資金,推進(jìn)AI醫(yī)療落地。首先技術(shù)方面,今年是大模型爆發(fā)的一年,目前國內(nèi)已經(jīng)形成“百模大戰(zhàn)”格局。諸多大模型廠商都主打To B路線,正在加速推動大模型在各個行業(yè)的應(yīng)用。還有一些廠商直接推出面向醫(yī)療的行業(yè)大模型,比如谷歌推出的Med-PaLM 2就已經(jīng)在診所實測。所以對于醫(yī)療領(lǐng)域而言,當(dāng)下是不缺“?!钡?。其次,大模型和醫(yī)療領(lǐng)域也天生非常契合。在常見的問診、病歷生成、患者病史分析等場景,都需要醫(yī)生基于歷史信息進(jìn)行整合總結(jié)、分析判斷,這正是大模型的長項。比如利用大模型的總結(jié)摘要能力,可以快速對多類數(shù)據(jù)進(jìn)行總結(jié)并形成摘要,幫醫(yī)生完成繁瑣、重復(fù)性高的工作,提升效率。并且實際落地上,只需以基座大模型為底,應(yīng)用專業(yè)醫(yī)療數(shù)據(jù)訓(xùn)練,就能得到一個強(qiáng)大的醫(yī)療大模型,這能從根本上加速AI醫(yī)療落地。還能在一個系統(tǒng)中集成多個子模型,即可快速覆蓋更多場景。再來看行業(yè)發(fā)展方面,以國內(nèi)情況為例,數(shù)字化醫(yī)療、AI醫(yī)療逐漸發(fā)展為一個獨立賽道,玩家們利用數(shù)據(jù)分析、自然語言處理(NLP)、結(jié)構(gòu)化數(shù)據(jù)等技術(shù),已經(jīng)成功將AI引入臨床診斷決策、病例數(shù)據(jù)管理等。
ChatGPT的爆火,讓人工智能再次成為全球關(guān)注的熱點。近年來,國家出臺多部關(guān)于新一代人工智能的政策,使之上升到國家戰(zhàn)略層面。而大模型技術(shù)的突破,無疑將賦能人工智能在醫(yī)學(xué)領(lǐng)域的發(fā)展。