近日，聯(lián)影智能在GitHub、Hugging face等國(guó)際知名開(kāi)發(fā)者平臺(tái)正式發(fā)布全球規(guī)模最大、性能最強(qiáng)的醫(yī)療視頻理解大模型——元智醫(yī)療視頻理解大模型（uAI-NEXUS-MedVLM ），同步首批開(kāi)源由6245個(gè)視頻-指令對(duì)構(gòu)成的標(biāo)準(zhǔn)測(cè)試集和模型，并設(shè)立“醫(yī)療視頻理解大模型榜單”，向全世界開(kāi)發(fā)者發(fā)出打榜邀請(qǐng)，以期推動(dòng)構(gòu)建統(tǒng)一、可驗(yàn)證的技術(shù)評(píng)測(cè)體系。

當(dāng)前，人工智能已在影像輔助診斷、智能問(wèn)診等場(chǎng)景實(shí)現(xiàn)落地應(yīng)用，但在手術(shù)等復(fù)雜動(dòng)態(tài)臨床場(chǎng)景中仍面臨顯著技術(shù)瓶頸。相較于靜態(tài)影像，醫(yī)療視頻理解對(duì)空間精度、時(shí)序邏輯和臨床語(yǔ)義提出了更高要求：既要精準(zhǔn)識(shí)別毫米級(jí)器械位置與解剖結(jié)構(gòu)，又要完整還原手術(shù)過(guò)程中的關(guān)鍵步驟與先后關(guān)系，還需以專業(yè)語(yǔ)言準(zhǔn)確表述具體操作及其臨床意義。在多重挑戰(zhàn)疊加下，即便全球領(lǐng)先的通用大模型，也難以有效完成手術(shù)視頻理解任務(wù)，長(zhǎng)期以來(lái)都是醫(yī)療大模型研發(fā)的“技術(shù)深水區(qū)”。

元智醫(yī)療視頻理解大模型匯聚53萬(wàn)余條視頻-指令數(shù)據(jù)、整合8個(gè)專業(yè)醫(yī)學(xué)數(shù)據(jù)集，覆蓋內(nèi)鏡、腹腔鏡、開(kāi)放手術(shù)、機(jī)器人手術(shù)及護(hù)理操作等核心臨床場(chǎng)景，模型參數(shù)達(dá)70億規(guī)模。在視頻摘要、關(guān)鍵安全視野評(píng)估、下一步操作預(yù)測(cè)等8項(xiàng)醫(yī)療視覺(jué)任務(wù)測(cè)試中，模型整體性能顯著優(yōu)于 GPT-5.4、Gemini-3.1 等通用大模型，多項(xiàng)指標(biāo)實(shí)現(xiàn)數(shù)倍領(lǐng)先。同時(shí)，模型支持4B/7B參數(shù)規(guī)模靈活切換，可實(shí)現(xiàn)單卡部署，具備良好的臨床應(yīng)用潛力。相關(guān)研究成果已被人工智能領(lǐng)域最具影響力的頂級(jí)會(huì)議IEEE國(guó)際計(jì)算機(jī)視覺(jué)與模式識(shí)別會(huì)議（CVPR 2026）收錄。

在具體任務(wù)表現(xiàn)上，元智醫(yī)療視頻理解大模型在手術(shù)安全評(píng)估任務(wù)中準(zhǔn)確率達(dá)到89.4%，顯著高于 GPT-5.4（1.8%）和 Gemini-3.1（10.1%）；在滿分5分的視頻報(bào)告生成任務(wù)中，評(píng)分達(dá)到4.2分，同樣大幅領(lǐng)先于通用模型。此外，該模型不僅能夠正確識(shí)別醫(yī)療器械與手術(shù)操作，還可進(jìn)一步理解其空間位置及臨床操作意圖，可應(yīng)用于手術(shù)引導(dǎo)、術(shù)中安全保障、手術(shù)記錄、醫(yī)學(xué)教學(xué)及具身智能手術(shù)設(shè)備研發(fā)等場(chǎng)景。

在開(kāi)源方面，模型研發(fā)負(fù)責(zé)人吳子彥表示：“相較于‘閉門造車’式的單點(diǎn)創(chuàng)新，我們選擇開(kāi)源高質(zhì)量數(shù)據(jù)集，就是希望能為手術(shù)視頻分析、特定病種診斷等細(xì)分賽道提供一把 ‘公共標(biāo)尺’，讓全球研究者和開(kāi)發(fā)者能在可復(fù)現(xiàn)、可驗(yàn)證的環(huán)境下開(kāi)展協(xié)同創(chuàng)新。這不僅能持續(xù)驅(qū)動(dòng)技術(shù)迭代與場(chǎng)景落地，也有望促進(jìn)醫(yī)療視頻理解領(lǐng)域從分散探索邁向體系化發(fā)展，推動(dòng)形成一個(gè)開(kāi)放、共享的全球創(chuàng)新生態(tài)，與全球開(kāi)發(fā)者共同推動(dòng)創(chuàng)造一個(gè)更智能化的醫(yī)療未來(lái)。

審核編輯 黃宇