![]()
新智元報(bào)道
編輯:KingHZ 桃子
【新智元導(dǎo)讀】真正的醫(yī)療AI是什么樣的?磨劍13年,中國(guó)AI拿下了三項(xiàng)權(quán)威評(píng)測(cè)冠軍,直接刷新行業(yè)天花板。它不玩虛的,專攻臨床真實(shí)場(chǎng)景,讓AI從工具蛻變?yōu)檎嬲呐R床協(xié)助者。
諾獎(jiǎng)得主Hassabis曾說(shuō)過(guò),未來(lái)十年,AI將會(huì)治愈所有疾病!
多模態(tài)大模型Scaling還在繼續(xù),每一次迭代,意味著我們離這一愿景又近了一步。
然而,現(xiàn)實(shí)卻給我們潑了一盆冷水。
KFF最新一項(xiàng)調(diào)查顯示,美國(guó)每6名成年人中,就有1人每月使用ChatGPT獲取健康建議。
然而,結(jié)果令人震驚,僅有1/3的人信任AI給出的建議,大多數(shù)人還是持有懷疑的態(tài)度。
![]()
為什么人們一邊熱情擁抱AI,一邊又心存疑慮?
根本原因在于:通用大模型,并不是為醫(yī)療而生的。
它們整體能力很強(qiáng),但在高度專業(yè)的醫(yī)療場(chǎng)景中,卻往往幻覺(jué)頻出、缺乏嚴(yán)謹(jǐn)?shù)呐R床驗(yàn)證。
這也正是醫(yī)療領(lǐng)域,需要專家級(jí)大模型的原因。
它不需要成為簡(jiǎn)單的「萬(wàn)能答案機(jī)」,而要做一名真正的「臨床工作者」,才能贏得醫(yī)患的信任。
在國(guó)內(nèi)醫(yī)療AI賽道上,有一家企業(yè),正在嘗試打破這道信任壁壘——
云知聲用了13年時(shí)間。
最近,在權(quán)威醫(yī)療評(píng)測(cè)MedBench4.0中,云知聲斬獲大語(yǔ)言模型、多模態(tài)模型和智能體評(píng)測(cè)「三冠王」。
![]()
此次「三冠王」,是對(duì)山海大模型核心升級(jí)的肯定。
這不僅重新定義了醫(yī)療AI的天花板,也標(biāo)志著AI真正走向嚴(yán)肅臨床!
醫(yī)療AI,走到哪一步了?
Hassabis的預(yù)言并非空穴來(lái)風(fēng),放眼全球,AI在醫(yī)療領(lǐng)域正以驚人的速度展開(kāi)。
有網(wǎng)友表示,「自己在每次看醫(yī)生之前,都會(huì)進(jìn)行一次AI會(huì)診和評(píng)估。沒(méi)有AI的醫(yī)療是失職的」。
可以看出,AI正逐漸成為個(gè)人醫(yī)療健康的重要參照物。
![]()
根據(jù)Menlo Ventures研究,今年有22%的醫(yī)療機(jī)構(gòu)部署了特定領(lǐng)域的AI工具,這一數(shù)字是2024年的7倍。
另有數(shù)據(jù)顯示,預(yù)計(jì)到2032年,全球醫(yī)療AI市場(chǎng)規(guī)模將超過(guò)1100億美元-5040億美元。
![]()
在這一賽道上,不僅有谷歌、微軟、OpenAI等科技大廠長(zhǎng)期深耕,還有一些垂類的初創(chuàng)公司紛紛展開(kāi)布局。
5月,谷歌DeepMind曾開(kāi)源了強(qiáng)大的醫(yī)療模型MedGemma,在多模態(tài)醫(yī)學(xué)文本和圖像理解上表現(xiàn)優(yōu)異。
![]()
同一時(shí)間,微軟MAI-DxO診斷工具,可以協(xié)調(diào)多個(gè)AI醫(yī)生的診斷,準(zhǔn)確率號(hào)稱達(dá)醫(yī)生的4倍。
還有OpenAI在8月專為生命科學(xué)和蛋白質(zhì)工程,定制了一款GPT?4b micro。
此外,還有一些新晉的實(shí)力玩家,包括OpenEvidence、Commure等,集中在了醫(yī)療文書(shū)、后臺(tái)/前臺(tái)RCM等領(lǐng)域。
![]()
在臨床實(shí)踐階段,AI已開(kāi)始輔助醫(yī)生處理日常問(wèn)診任務(wù)、實(shí)時(shí)檢測(cè)患者健康、并通過(guò)預(yù)測(cè)分析預(yù)防疾病進(jìn)展等。
然而,現(xiàn)實(shí)與理想之間仍橫亙著重重痛點(diǎn)。
從技術(shù)層面來(lái)看,醫(yī)療場(chǎng)景存在診療路徑的多元性,同一病歷可能存在多種合理的路徑,醫(yī)生的經(jīng)驗(yàn)、科室差異都會(huì)影響判斷。
而KFF調(diào)查揭示的「信任危機(jī)」并非孤例。
由于醫(yī)療高度專業(yè)性,錯(cuò)誤往往不會(huì)呈現(xiàn)「顯性」,因此醫(yī)療AI最大的風(fēng)險(xiǎn)在于「答得看起來(lái)很對(duì)」。
但實(shí)際上,幻覺(jué)問(wèn)題是最致命的。
從數(shù)據(jù)層來(lái)看,高質(zhì)量醫(yī)療數(shù)據(jù)極其稀缺,因?yàn)閿?shù)據(jù)分散在不同醫(yī)院、系統(tǒng),且標(biāo)準(zhǔn)不統(tǒng)一,含有大量噪聲。
甚至,大量數(shù)據(jù)是「切片式」的,完整診療鏈路數(shù)據(jù)極少。
再加上,數(shù)據(jù)標(biāo)注成本極高,一般由專業(yè)醫(yī)生參與,很難像自動(dòng)駕駛那樣形成「自增強(qiáng)飛輪」。
在臨床層面,最大困境在于,AI很難融入醫(yī)生真實(shí)的工作流當(dāng)中。
很多醫(yī)療AI產(chǎn)品失敗的原因在于,把醫(yī)生當(dāng)成了「搜索用戶」,而非「任務(wù)執(zhí)行者」。
真正的臨床醫(yī)療是「流程型工作」,AI不僅要擅長(zhǎng)其中的某一步,還要理解前后的約束關(guān)系。
面對(duì)這些困境,我們不禁要問(wèn):一個(gè)平衡實(shí)用性、專業(yè)性、安全性的醫(yī)療AI存在嗎?
答案,或許就在云知聲「山海·知醫(yī)大模型5.0」的身上。
它的誕生,標(biāo)志著AI從單一的「智能工具」,轉(zhuǎn)變?yōu)榭煽康摹概R床協(xié)作者」。
山海·知醫(yī)5.0登場(chǎng)
「臨床協(xié)助者」時(shí)代開(kāi)啟
這么說(shuō)吧,這一次「山海·知醫(yī)大模型5.0」是云知聲醫(yī)療AI的集大成之作,圍繞臨床需求展開(kāi)了系統(tǒng)性重塑。
它采用了「醫(yī)學(xué)文本+多模態(tài)」雙引擎架構(gòu),在多項(xiàng)關(guān)鍵能力上實(shí)現(xiàn)全面提升。
一、全棧能力融合
過(guò)去醫(yī)療AI產(chǎn)品,往往以「模塊化能力堆疊」為主——NLP負(fù)責(zé)病歷結(jié)構(gòu)化、影像模型輔助閱片......
這些能力雖各自有效,但缺乏統(tǒng)一語(yǔ)義空間與任務(wù)協(xié)同機(jī)制,在真實(shí)場(chǎng)景中,難以形成閉環(huán)。
要知道在臨床中,診療是一條高度連續(xù)、動(dòng)態(tài)演化的決策鏈條(非必要環(huán)節(jié),依具體病況而定):
主訴→病史→檢查→影像→診斷→路徑選擇→隨訪調(diào)整
山海·知醫(yī)大模型5.0恰恰為門診、住院等復(fù)雜診療場(chǎng)景提供「一站式」智能支持,打破了傳統(tǒng)醫(yī)療AI功能單一的局限。
它實(shí)現(xiàn)了文本深度處理、智能體任務(wù)協(xié)同、影像多模態(tài)感知等全棧能力的融合。
這也就意味著,山海·知醫(yī)大模型5.0可以處理知識(shí)問(wèn)答、臨床路徑規(guī)劃、影像報(bào)告解析等多元任務(wù)。
假設(shè)一位醫(yī)生需要查詢「非布司他」適應(yīng)癥和用藥禁忌,山海文本大模型直接給出回復(fù),還可以溯源更具可信度。

在真實(shí)診斷中,醫(yī)生需要結(jié)合多維度信息,比如一位胸痛患者,需同時(shí)分析影像報(bào)告和病史。
此時(shí),山海·知醫(yī)在看懂影像同時(shí),還能關(guān)聯(lián)文本信息,實(shí)現(xiàn)「影像+臨床」雙驗(yàn)證。

此外,它調(diào)動(dòng)「雙核模型」規(guī)劃臨床路徑。

二、高階推理進(jìn)化與智能體進(jìn)化
臨床診斷的難點(diǎn)在于,它需要在不完整信息下,不斷提出假設(shè)、驗(yàn)證假設(shè)、修正假設(shè)。
山海·知醫(yī)大模型5.0此次升級(jí)的核心突破,在于模型「思維的進(jìn)化」。
它深度融合了模擬臨床診斷的復(fù)雜推理鏈,讓自身具備了一種更接近醫(yī)生思維的推理工作流。
同時(shí),它還具備了原生的任務(wù)規(guī)劃與工具調(diào)用能力,在理解需求后,拆解任務(wù)并決定每一步需要什么工具、數(shù)據(jù)。
下面demo中,拿到模擬的病例后,山海·知醫(yī)沒(méi)有簡(jiǎn)單羅列病因,而是對(duì)每種病因進(jìn)行證據(jù)加權(quán)、鑒別排除,最終給出循證決策路徑。

在生成全流程任務(wù)處理清單時(shí),它還會(huì)自主調(diào)用工具、跨系統(tǒng)協(xié)調(diào)資源......

可以看到,AI正從被動(dòng)應(yīng)答的「醫(yī)學(xué)認(rèn)知大腦」,升級(jí)為能主動(dòng)理解需求、拆解步驟并高效執(zhí)行的「自主醫(yī)療行動(dòng)者」,完美適配從門診到住院的全流程復(fù)雜任務(wù)流。
三、多模態(tài)深度賦能臨床
影像和文本,從來(lái)不是兩條獨(dú)立的信息鏈。
山海·知醫(yī)大模型5.0升級(jí)后,兼具「看懂影像」和「讀懂文本」的雙重能力。
它不僅能精準(zhǔn)識(shí)別X光、CT、MRI等影像中病灶,還能將影像特征映射到醫(yī)學(xué)語(yǔ)義空間中。
也就是說(shuō),它可以實(shí)現(xiàn)影像特征與臨床描述的跨模態(tài)語(yǔ)義對(duì)齊及聯(lián)合推理。

這就好比為醫(yī)生配備了「圖文協(xié)同」智能助手,大幅提升診斷的精準(zhǔn)性與效率。
四、醫(yī)療垂域?qū)I(yè)能力領(lǐng)先
在醫(yī)療領(lǐng)域,模型能力的上限固然重要,但能否長(zhǎng)期、規(guī)模化進(jìn)入真實(shí)臨床流程,取決于下限是否足夠可靠。
這次升級(jí),5.0版本圍繞了「權(quán)威性、真實(shí)性、可驗(yàn)證性」這一核心命題展開(kāi),構(gòu)成醫(yī)療垂域競(jìng)爭(zhēng)力的底層支柱。
在醫(yī)學(xué)知識(shí)上,它精準(zhǔn)覆蓋了疾病、癥狀、藥物、治療方案等全領(lǐng)域醫(yī)學(xué)知識(shí),可實(shí)現(xiàn)高效檢索與專業(yè)回復(fù)。
同時(shí),借助增量訓(xùn)練,Graph-RAG知識(shí)注入、任務(wù)級(jí)Agentic-RL訓(xùn)練等,大幅減少了幻覺(jué)事實(shí)性錯(cuò)誤。
此外,在醫(yī)學(xué)信息抽取能力上的強(qiáng)化,5.0版本能對(duì)復(fù)雜病歷、病程記錄、醫(yī)囑文本實(shí)現(xiàn)高精度實(shí)體識(shí)別與關(guān)系抽取。

總而言之,山海·知醫(yī)大模型5.0在「四大核心」能力上實(shí)現(xiàn)了階躍式進(jìn)化,構(gòu)建了目前業(yè)內(nèi)最全面的醫(yī)療AI支持框架,完美匹配臨床實(shí)際需求。
那么,它背后究竟采用了什么黑科技,讓我們一一拆解。
核心技術(shù)揭秘
從底層數(shù)據(jù)體系到強(qiáng)化學(xué)習(xí)策略,山海·知醫(yī)大模型5.0是一個(gè)從真實(shí)臨床任務(wù)中「長(zhǎng)出來(lái)」的醫(yī)療大模型體系。
從架構(gòu)上來(lái)說(shuō),山海·知醫(yī)大模型5.0「雙核引擎」的背后——
醫(yī)學(xué)文本大模型是核心底座,多模態(tài)能力再通過(guò)視覺(jué)編碼器對(duì)齊后內(nèi)嵌其中。
與上一代模型相比,5.0版本首個(gè)根本性的變化,發(fā)生在「數(shù)據(jù)體系」。
在訓(xùn)練過(guò)程中,它采用了「結(jié)構(gòu)化圖譜-半結(jié)構(gòu)化文檔-過(guò)程化軌跡」三層數(shù)據(jù)結(jié)構(gòu):
底層是「醫(yī)學(xué)知識(shí)原生結(jié)構(gòu)」,這部分?jǐn)?shù)據(jù)核心是醫(yī)學(xué)知識(shí)圖譜,包含了疾病—癥狀—檢查—用藥之間的結(jié)構(gòu)化關(guān)系,以及不同醫(yī)學(xué)時(shí)間尺度下的演化邏輯。
中層是「權(quán)威醫(yī)學(xué)文本」,比如包括臨床指南、醫(yī)學(xué)文獻(xiàn)、教材與專業(yè)書(shū)籍等。
上層是「真實(shí)臨床任務(wù)」數(shù)據(jù),即醫(yī)生與系統(tǒng)交互產(chǎn)生的數(shù)據(jù),以及真實(shí)業(yè)務(wù)流程中沉淀的「工作流樣本」,覆蓋了從門診、住院到出院的完整就醫(yī)路徑。
此外,5.0版本核心能力提升的另一關(guān)鍵,在于「任務(wù)型強(qiáng)化學(xué)習(xí)」算法的改進(jìn)。
如上所述,醫(yī)療中正確答案往往不存在唯一形式,那么如何讓AI判定對(duì)/錯(cuò)?
山海·知醫(yī)的做法在于,將醫(yī)生真實(shí)的操作行為作為「獎(jiǎng)勵(lì)信號(hào)」,比如對(duì)模型的輸出、補(bǔ)充、否定/糾正。
這些行為被設(shè)計(jì)成「任務(wù)級(jí)獎(jiǎng)勵(lì)函數(shù)」,直接用于強(qiáng)化學(xué)習(xí)的訓(xùn)練。
順便提一句,強(qiáng)化學(xué)習(xí)并非單點(diǎn)優(yōu)化,而是直接嵌入到業(yè)務(wù)流程,與具體任務(wù)綁定,讓模型學(xué)會(huì)在什么階段,應(yīng)該做什么事。
內(nèi)化智能體
在當(dāng)前主流方案中,Agent往往以外掛形式存在,但會(huì)帶來(lái)穩(wěn)定性差、調(diào)用不確定、工程復(fù)雜的問(wèn)題。
山海·知醫(yī)選用了另一條路:
把工具調(diào)用與規(guī)劃能力,直接訓(xùn)進(jìn)模型內(nèi)部。
在訓(xùn)練階段,模型就已經(jīng)見(jiàn)過(guò)真實(shí)業(yè)務(wù)的工具使用流程,學(xué)會(huì)了在特定情境下調(diào)用特定工具。
本質(zhì)上,這是把「流程記憶」內(nèi)化到模型參數(shù)當(dāng)中。
此外,在慢病管理、連續(xù)就診場(chǎng)景中,模型并不會(huì)什么都記下來(lái),而采用了「選擇性記憶機(jī)制」。
團(tuán)隊(duì)會(huì)通過(guò)上下文工程與權(quán)重設(shè)計(jì),對(duì)過(guò)期、低價(jià)值的信息進(jìn)行降權(quán),將與當(dāng)前任務(wù)更相關(guān)的信息納入長(zhǎng)期記憶中。
憑借扎實(shí)的技術(shù)積累,云知聲再獲喜訊:國(guó)家人工智能應(yīng)用中試基地(醫(yī)療)?浙江測(cè)試了30多款A(yù)I模型,山海·知醫(yī)大模型5.0脫穎而出,入選《MedAIBench測(cè)評(píng)榜(優(yōu)秀國(guó)產(chǎn)醫(yī)療大模型)》。
值得一提的是,在未來(lái)規(guī)劃中,山海·知醫(yī)大模型還將:
逐步融合語(yǔ)音模態(tài)、擴(kuò)展至醫(yī)學(xué)科研領(lǐng)域(諸如文獻(xiàn)分析、科研輔助),甚至去探索更底層的生物醫(yī)學(xué)建模能力。
這釋放出一個(gè)清晰的信號(hào):
醫(yī)療大模型的核心競(jìng)爭(zhēng)力,不只在于參數(shù)規(guī)模,而在于是否真正可以嵌入臨床任務(wù)本身。
毋庸置疑,技術(shù)如果只停留在論文與榜單上,醫(yī)療行業(yè)不會(huì)買賬。
臨床信任來(lái)自「用起來(lái)省事、風(fēng)險(xiǎn)確實(shí)降低、可管可控」。
截至2025年6月,云知聲智慧醫(yī)療解決方案已部署400家醫(yī)院,700余家進(jìn)入測(cè)試階段。
特別地,已覆蓋全國(guó)近40%百?gòu)?qiáng)三甲醫(yī)院,如北京協(xié)和醫(yī)院、北京友誼醫(yī)院等。
根據(jù)弗若斯特沙利文的數(shù)據(jù),按2024年收入計(jì)算,云知聲在中國(guó)醫(yī)療服務(wù)及治療AI市場(chǎng)中排名第四,并在電子病歷這一關(guān)鍵細(xì)分市場(chǎng)中穩(wěn)居行業(yè)前三。
![]()
比如,在北京友誼醫(yī)院順義院區(qū)應(yīng)用中,報(bào)道提到云知聲的門診病歷生成系統(tǒng)的單份病歷采納率接近90%。
既能在權(quán)威評(píng)測(cè)里拿到三冠王,又能在病歷、質(zhì)控、醫(yī)保這些「硬骨頭」場(chǎng)景里跑起來(lái),這是一種更稀缺的能力:
專業(yè)不是寫(xiě)在宣傳頁(yè)上,而是磨在流程里。
從協(xié)和醫(yī)院出發(fā),云知聲AI落地醫(yī)療
今年,AGI的共識(shí)已經(jīng)形成。真正的分歧只剩一個(gè):誰(shuí)先落地?
成立于2012年,「港股AGI第一股」云知聲從創(chuàng)立之初只專注一件事:把AI,塞進(jìn)真實(shí)世界。
而他們?cè)卺t(yī)療領(lǐng)域的布局,遠(yuǎn)早于大模型的浪潮。
一年多后,在行業(yè)對(duì)「AI+醫(yī)療」普遍持懷疑態(tài)度時(shí),云知聲便做出了一個(gè)明確的決定:進(jìn)醫(yī)療。
2016年,云知聲的語(yǔ)音識(shí)別系統(tǒng),在北京協(xié)和醫(yī)院落地,主打「效率工具」。
醫(yī)生開(kāi)口說(shuō)話,系統(tǒng)實(shí)時(shí)轉(zhuǎn)寫(xiě)。一份病歷,從原來(lái)的3個(gè)小時(shí),縮短到1小時(shí)以內(nèi)。
AI,第一次把時(shí)間還給了醫(yī)生。但云知聲并不滿足于此。
他們不想只做「更快」的工具,便開(kāi)始嘗試更難的事。于是,他們基于「知識(shí)圖譜+BERT語(yǔ)言模型」的能力去做病歷質(zhì)控。
![]()
BERT語(yǔ)言模型由谷歌在2018年發(fā)明,是當(dāng)時(shí)最先進(jìn)的語(yǔ)言模型
病歷看起來(lái)只是幾頁(yè)文字,但在醫(yī)療體系里,它是一切判斷的起點(diǎn)。
用藥對(duì)不對(duì),流程合不合規(guī),風(fēng)險(xiǎn)能不能追責(zé), 全靠病歷。
![]()
過(guò)去,僅靠人工抽檢,覆蓋率只有約2%-5%。而云知聲的做法是:100%全量用AI檢查,可以實(shí)現(xiàn)全病歷覆蓋,大幅提高病歷質(zhì)控的效率。
如今,大模型出現(xiàn)后,云知聲把AI直接嵌進(jìn)了醫(yī)生的工作流。
現(xiàn)在,醫(yī)生一次問(wèn)診結(jié)束后,AI可以自動(dòng)生成病歷。醫(yī)生只需看一眼,點(diǎn)個(gè)確認(rèn),直接引用率約90%。
換句話說(shuō):10份病歷里,9份不用改一個(gè)字。
更關(guān)鍵的是,這90%不是出現(xiàn)在普通醫(yī)院,其中不乏協(xié)和醫(yī)院這樣的百?gòu)?qiáng)三甲。
如果基層醫(yī)院也用上同樣的工具,AI真正的普惠,才剛剛開(kāi)始。
而這些,還只是云知聲智慧醫(yī)療的冰山一角。
醫(yī)院,是國(guó)內(nèi)AI落地醫(yī)療的主戰(zhàn)場(chǎng),但醫(yī)療機(jī)構(gòu)不只是三甲醫(yī)院。
在臨床知識(shí)圖譜、大語(yǔ)言模型、智能語(yǔ)音識(shí)別等基礎(chǔ)技術(shù)支撐下,云知聲正在探索一條更適合中國(guó)國(guó)情的、可規(guī)模化的AI醫(yī)療服務(wù)落地路徑。
在國(guó)家層面,「AI+醫(yī)療」的落地節(jié)奏,已經(jīng)被明確寫(xiě)進(jìn)時(shí)間表。
2027年:基層診療智能輔助廣泛應(yīng)用
2030年:智能輔助基本實(shí)現(xiàn)全覆蓋
![]()
AI醫(yī)療,已不再是探索題,而是時(shí)間表里的必答題。
云知聲已做好兩手準(zhǔn)備:一方面繼續(xù)保持技術(shù)和產(chǎn)品的快速迭代,另一方面積極進(jìn)取、持續(xù)探索新的商業(yè)模式。
據(jù)黃偉博士介紹,云知聲已經(jīng)走通從醫(yī)院到保險(xiǎn)公司的商業(yè)模式。無(wú)論是醫(yī)保,還是商業(yè)保險(xiǎn)方面,云知聲的增長(zhǎng)非常快速。
從醫(yī)院,到區(qū)域平臺(tái),再到醫(yī)保和商業(yè)保險(xiǎn)。
云知聲,正在把AI醫(yī)療從「項(xiàng)目交付」,變成「系統(tǒng)供給」。
而他們更大的愿景是,持續(xù)提升AI大模型的醫(yī)學(xué)能力,為人類健康做出更多貢獻(xiàn)。
秒追ASI
?點(diǎn)贊、轉(zhuǎn)發(fā)、在看一鍵三連?
點(diǎn)亮星標(biāo),鎖定新智元極速推送!
![]()
特別聲明:以上內(nèi)容(如有圖片或視頻亦包括在內(nèi))為自媒體平臺(tái)“網(wǎng)易號(hào)”用戶上傳并發(fā)布,本平臺(tái)僅提供信息存儲(chǔ)服務(wù)。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.