11月30日-12月1日,2023未來醫(yī)療科技大會在合肥舉辦。大會以“無人之境”為主題,匯聚了近百位大咖嘉賓,聚焦智能醫(yī)療設備、基因測序、生物技術、生成式AI與醫(yī)療場景的結合等細分領域,為行業(yè)帶來一場產業(yè)思想交流盛宴。
作為大會核心論壇之一,生成式AI創(chuàng)新場景應用論壇于12月1日如期舉行。行業(yè)專家學者、頭部 AI 企業(yè)、頂尖投資人齊聚一堂,深度解讀生成式 AI 最新應用和未來發(fā)展機遇。云知聲IoT事業(yè)部、智慧醫(yī)療事業(yè)部總裁謝冠超應邀出席論壇并發(fā)表《生成式AI在病歷生成場景中的應用》主題演講。
深耕人工智能產業(yè)多年,云知聲一直密切關注AI前沿技術在醫(yī)療領域的創(chuàng)新應用。入局智慧醫(yī)療賽道以來,云知聲針對醫(yī)療行業(yè)各場景痛點,陸續(xù)研發(fā)推出了語音電子病歷、智能病歷質控、單病種質控、智能醫(yī)保審核等多款智慧醫(yī)療產品,覆蓋醫(yī)政醫(yī)管、臨床診療、醫(yī)保管理、患者服務等多個醫(yī)療業(yè)務環(huán)節(jié),山海大模型發(fā)布后,云知聲更是全面升級了醫(yī)療業(yè)務線各產品智能化水平,發(fā)布門診病歷生成系統(tǒng)、手術記錄撰寫助手、商保智能理賠系統(tǒng)等醫(yī)療產品應用,實現從助手到專家的躍遷。
現場,謝冠超基于過往云知聲在智慧醫(yī)療領域的技術探索與經驗積累,深度分享了生成式AI在病歷生成場景中的應用。
PART 1
門診病歷生成系統(tǒng):山海大模型在醫(yī)療場景的落地應用
門診病歷是對患者疾病發(fā)生、發(fā)展、轉歸、檢查、診斷、治療過程的記錄;是臨床實踐工作的總結,是探索疾病規(guī)律的依據,也是進行臨床科研和知識發(fā)現的寶貴資料。
規(guī)范和完善病歷質量,對預防醫(yī)療糾紛發(fā)生,保護醫(yī)務人員的合法權益,規(guī)范門診醫(yī)療行為、改善醫(yī)療服務、提高醫(yī)療質量具有重要意義。
然而,對于門診醫(yī)生而言,每個門診單元(四個小時)要接診30-40個患者,平均每個患者6-8分鐘;平均每份病歷150-200字,錄入時間為1.5min-2min。在接診工作、病歷錄入工作如此繁復的情況下,很難完成高質量的門診病歷。
為解決這一痛點,云知聲以山海大模型為技術底座,應用前端聲音信號處理、智能語音識別等技術,結合龐大的醫(yī)療知識圖譜,打造門診病歷生成系統(tǒng),一鍵生成門診病歷。
具體來講,云知聲先是通過噪音抑制、回聲消除等技術,精準捕捉醫(yī)患對話并對其進行角色分離,再依托山海大模型,智能抓取對話中的關鍵問診信息,對其進行標準化、結構化處理,從而形成準確、簡潔的醫(yī)療摘要,經醫(yī)生審核修改后,即可生成符合病歷書寫規(guī)范的標準病歷。
在云知聲門診病歷生成系統(tǒng)的助力下,門診病歷的規(guī)范性、完整性大幅提升,病歷內容更加詳實、準確,醫(yī)生只需在系統(tǒng)生成的病歷上稍作修改即可完成最終病歷,有效提升門診效率,切實為醫(yī)生減負的同時,也大幅提升了患者的就診體驗。
作為支撐云知聲門診病歷生成系統(tǒng)的技術底座,山海大模型在醫(yī)療領域的表現頗為出色——MedQA任務達87.1%,超越Med-PaLM 2;臨床執(zhí)業(yè)醫(yī)師資格考試達523分(總分600分),超過99%的考生水平;在 CCKS 2023 PromptCBLUE醫(yī)療大模型評測中,云知聲也憑借基于山海大模型孵化的UNIGPT-MED 模型獲通用賽道一等獎。
亮眼成績的背后,是云知聲對模型專業(yè)能力的極致打磨。針對低容錯率的醫(yī)療場景,云知聲從預訓練、微調、推理、知識插件機制四個方面發(fā)力,打造更“懂”醫(yī)療場景的大模型:
● 預訓練階段
基于山海大模型通用底座,利用海量醫(yī)療語料(包括醫(yī)療教材,臨床指南,醫(yī)院病歷等)做增量預訓練,提高模型的醫(yī)學語言理解和生成能力。
● 微調階段
優(yōu)選歷年醫(yī)學考試題目對山海醫(yī)療基座模型做微調,提高模型的醫(yī)學考試能力。
● 推理階段
利用思維鏈技術注入解題思路過程,提高模型的醫(yī)學推理能力。
● 知識插件機制
通過使用多年來積累的醫(yī)學知識圖譜,可以動態(tài)地檢索與問題相關的醫(yī)學知識。這些知識可以作為背景知識,與大模型中的參數化知識相結合,從而提高模型在醫(yī)學領域的知識水平。
目前,基于山海大模型打造的門診病歷生成系統(tǒng)已在北京友誼醫(yī)院落地試用,也先后榮獲北京市首批人工智能行業(yè)大模型應用案例、2023北京人工智能行業(yè)賦能典型案例等榮譽獎項,大模型技術實力與場景落地能力得到業(yè)界高度認可。
PART 2
“做比想要困難很多”,病歷生成系統(tǒng)落地過程中面臨的實際挑戰(zhàn)
從產品設想,到落地實施,一個產品的誕生從不是一蹴而就的。在門診病歷生成系統(tǒng)的落地過程中,云知聲主要面臨以下挑戰(zhàn):
一是診室環(huán)境復雜。在我們理想的問診場景中,每個診室是一醫(yī)一患的面對面溝通。而在實際場景中,每個診室可能有多位醫(yī)生同時坐診,且部分患者需要家屬陪同。而在問診過程中,醫(yī)生有時需要跟患者接觸,位置會隨之移動,這也為語音收錄和角色分離增加了難度。為解決以上問題,云知聲門診病歷生成系統(tǒng)的語音方案針對不同診室環(huán)境,采取靈活定制的方式,最大程度上確保了麥克風的拾音效果。
二是醫(yī)患對話不規(guī)范。存在醫(yī)療表達難理解、醫(yī)患對話重疊、醫(yī)患對話中有第三人(陪診)等難點。為適應這種不規(guī)范,云知聲針對真實醫(yī)患進行場景化的識別模型訓練,并采用分聲道拾音技術對醫(yī)患對話進行識別,識別后“重新組合”醫(yī)患對話。
三是輸出內容不受控。雖然大模型對醫(yī)患對話的理解和摘要是正確的,但患者表述涉及多個時間線,可能會有多次重復,甚至是前后矛盾,大模型需要判斷和選擇正確的內容給予輸出;同時符合事實的正確摘要也不能直接輸出符合書寫規(guī)范的病歷,這一步的生成也是不受控的,大模型需要在理解輸入的基礎上,結合嚴格的病歷書寫規(guī)范進行輸出。
基于對醫(yī)療場景的深刻理解和多年的技術、數據儲備,云知聲能夠快速挖掘醫(yī)療場景落地過程中的具體痛點并給出解決方案,這也是門診病歷生成系統(tǒng)得以迅速落地的重要原因。
門診病歷生成是整個病歷生成的一個環(huán)節(jié),而不是全部;是一個開始,而不是結束。
面向未來,云知聲山海大模型將從醫(yī)患對話擴展到醫(yī)生對話場景,從對話擴展到獨白場景,從語音輸入擴展到全模態(tài)全數據輸入,進而覆蓋全部病歷文書撰寫場景,幫助醫(yī)生擺脫繁重的文書撰寫工作,減輕醫(yī)生壓力的同時,也讓醫(yī)生有更多的時間和精力去服務患者,全面提升患者就診體驗。
大會期間,云知聲門診病歷生成系統(tǒng)、手術記錄撰寫助手等醫(yī)療產品應用悉數亮相展會,充分展示了山海大模型落地智慧醫(yī)療領域的最新創(chuàng)新成果,讓與會者看到了生成式AI與醫(yī)療場景結合的更多可能。
未經數字化報網授權,嚴禁轉載或鏡像,違者必究。
特別提醒:如內容、圖片、視頻出現侵權問題,請發(fā)送郵箱:tousu_ts@sina.com。
風險提示:數字化報網呈現的所有信息僅作為學習分享,不構成投資建議,一切投資操作信息不能作為投資依據。本網站所報道的文章資料、圖片、數據等信息來源于互聯網,僅供參考使用,相關侵權責任由信息來源第三方承擔。
本文地址: http:///news/53225.shtml
Copyright ? 2013-2023 數字化報(數字化報商業(yè)報告)
數字化報并非新聞媒體,不提供新聞信息服務,提供商業(yè)信息服務
浙ICP備2023000407號數字化報網(杭州)信息科技有限公司 版權所有浙公網安備 33012702000464號