3月28日,萬仞智慧智能科技(北京)有限公司(下稱“萬仞AI”)通過官方公眾號宣布,基于自研大模型平臺,正式發(fā)布全球首個8模態(tài)醫(yī)療大模型——董奉大模型。
萬仞AI方面介紹,董奉大模型的名字源自“建安三神醫(yī)”之一的董奉,與華佗、張仲景齊名,并開創(chuàng)了“杏林文化”。
據(jù)悉,董奉大模型面向患者、醫(yī)護人員及醫(yī)院管理人員,提供包括在線健康助理、智能分診預(yù)診、初級醫(yī)護指引、病歷校驗質(zhì)檢、醫(yī)生工作助理、診后隨訪助理、專家實時分身會診以及醫(yī)療績效考核、控費管理等覆蓋全病程的大模型應(yīng)用。實現(xiàn)支持語音(如實時語音對話)、文字(如病歷/處方/報告)、圖像(如醫(yī)療影像/手機照片/病理學(xué)圖片)、視頻(如實時分身/自錄視頻/內(nèi)鏡/患者教育)、情感(如語氣/情緒/行為)、結(jié)構(gòu)化數(shù)據(jù)(如檢驗/診斷/醫(yī)學(xué)KG)、電信號(如腦波/脈象/肌電)及生物信息(如基因數(shù)據(jù))共計8個模態(tài)的輸入與輸出。
官方表示,萬仞AI已與吉林大學(xué)、實在智能、威能思軟等機構(gòu)達成戰(zhàn)略合作,搭建了AI科技研究基地和產(chǎn)研合作中心,并已定向在某省人民醫(yī)院(三甲)、某省人民醫(yī)院分院(二甲)和某市級互聯(lián)網(wǎng)醫(yī)院平臺等完成落地。
去年5月,自動駕駛公司Momenta產(chǎn)品與工程副總裁王榮興離職的消息傳出,6月王榮興便創(chuàng)立了萬仞AI,并引入前IBM大中華區(qū)Watson醫(yī)療落地總監(jiān)張軼倫作為合伙人。10月,萬仞AI獲得了由銀瓴投資領(lǐng)投的數(shù)千萬元種子輪投資。官方介紹,萬仞AI的企業(yè)戰(zhàn)略介于通用大模型與專屬定制之間,提供貼合我國國情的私有化、小型化、自動化與定制化的企業(yè)級大模型解決方案。除醫(yī)療行業(yè)外,未來還將拓展康養(yǎng)、金融、汽車、農(nóng)業(yè)、零售等行業(yè)。
萬仞AI展示了董奉大模型的幾項能力:
首先是“實時多模態(tài)分身”能力,能夠為醫(yī)療機構(gòu)、互聯(lián)網(wǎng)醫(yī)院服務(wù)機構(gòu)提供實時多模態(tài)分身,并適配立式大屏、平板小屏以及個人手機等各類硬件。萬仞AI介紹,基于董奉大模型,能以實時視頻溝通的形式與用戶持續(xù)進行個性化對話,而非預(yù)設(shè)腳本的循環(huán)錄播,從而形成在線健康助理、智能分診預(yù)診、診后隨訪助理以及專家實時分身會診等線上線下醫(yī)療場景的交互入口。
二是在線問診的能力,利用多模態(tài)能力,有效采集患者全病程中的最新癥狀、治療執(zhí)行、不良反應(yīng)、情緒等全方位數(shù)據(jù),從而對患者病情、依從性等進行解讀和預(yù)測,給出就診建議。同時,董奉大模型通過“醫(yī)生工作助理”、“隨訪機器人”等工具,面向醫(yī)生及患者,實現(xiàn)從診療到康復(fù)的全程助理服務(wù)。
此外,在醫(yī)院管理層面,董奉大模型能為醫(yī)護群體提供“初級醫(yī)護指引”、“病例校驗質(zhì)檢”等應(yīng)用,幫助醫(yī)護人員減輕負(fù)擔(dān),并為醫(yī)院管理體系提供“國家醫(yī)療績效考核”“方案綜合費用控制”等定制功能,助力醫(yī)院管理。
根據(jù)萬仞AI展示的董奉大模型與ChatGPT的簡單對比,在問診方面,ChatGPT提供了更多的可能性和建議,并引導(dǎo)用戶提供更多信息,相對來說,董奉大模型的問診過程體現(xiàn)出一定的針對性。
而在“國考”問題的反饋上,董奉大模型表現(xiàn)出了十足的本土化,遵照《國家三級公立醫(yī)院績效考核操作手冊》給出答案,ChatGPT在這一方面則有所欠缺。
不過,此次萬仞AI并未公布董奉大模型的參數(shù)規(guī)模、預(yù)訓(xùn)練語料等相關(guān)數(shù)據(jù),截至發(fā)稿,董奉大模型的體驗入口也尚未公布。
注:文章來源于網(wǎng)絡(luò),如有侵權(quán),請聯(lián)系刪除