中國(guó)信通院開(kāi)展醫(yī)療健康大模型效能評(píng)估工作
2024/10/10 21:05 來(lái)源:中國(guó)新聞網(wǎng) 閱讀:5.6萬(wàn)
中新網(wǎng)北京10月10日電 (記者 劉育英)記者10日從中國(guó)信息通信研究院了解到,,今年6月來(lái),中國(guó)信通院選取多款通用大模型和醫(yī)療健康行業(yè)大模型開(kāi)展效能評(píng)估工作,,結(jié)果顯示,,通用大模型在醫(yī)學(xué)知識(shí)廣度方面具有一定優(yōu)勢(shì),醫(yī)療健康行業(yè)大模型在特定醫(yī)療任務(wù)上表現(xiàn)優(yōu)異。
據(jù)了解,中國(guó)信息通信研究院聯(lián)合產(chǎn)學(xué)研用醫(yī)各方,共同搭建醫(yī)療健康行業(yè)大模型標(biāo)準(zhǔn)體系,,已形成技術(shù)要求、測(cè)試方法及成熟度評(píng)估三大系列,。同時(shí),,中國(guó)信通院依托系列標(biāo)準(zhǔn),為多家技術(shù)廠商提供醫(yī)療健康大模型的能力符合性驗(yàn)證,,持續(xù)完善評(píng)價(jià)細(xì)則,,提升標(biāo)準(zhǔn)實(shí)用性和適用性,助力行業(yè)大模型規(guī)范化,、集約化發(fā)展,。
2024年6月起,中國(guó)信通院選取GPT4,、GPT-4O等國(guó)外通用大模型,,文心一言、通義千問(wèn),、混元和智譜清言ChatGLM等國(guó)內(nèi)通用大模型,,靈醫(yī)Bot、夸克健康助手,、訊飛星火醫(yī)療大模型和華佗GPT II等醫(yī)療健康行業(yè)大模型展開(kāi)效能評(píng)估,,考察大模型在多學(xué)科知識(shí)問(wèn)答、多形式語(yǔ)言理解,、多場(chǎng)景文書(shū)生成,、多環(huán)節(jié)輔助診療、多輪對(duì)話(huà)交互,、多模態(tài)支持等六大方向的實(shí)際應(yīng)用效能。
結(jié)果顯示,,通用大模型在醫(yī)學(xué)知識(shí)廣度方面具有一定優(yōu)勢(shì),,醫(yī)療健康行業(yè)大模型在特定醫(yī)療任務(wù)上表現(xiàn)優(yōu)異。以訊飛星火醫(yī)療大模型為例,,其在個(gè)人畫(huà)像,、健康干預(yù)方案、病歷文書(shū)生成及質(zhì)控,、檢驗(yàn)檢查報(bào)告解讀,、體檢報(bào)告單解讀,、藥盒解讀等細(xì)分任務(wù)中表現(xiàn)均處于領(lǐng)先,在健康常識(shí),、疾病百科,、用藥知識(shí)、電子病歷結(jié)構(gòu)化,、專(zhuān)業(yè)知識(shí)生活化等方向上均展現(xiàn)高度專(zhuān)業(yè)性,。
下一步,中國(guó)信通院將繼續(xù)聯(lián)合醫(yī)療機(jī)構(gòu),、科研院所,、技術(shù)廠商等各界力量,結(jié)合動(dòng)態(tài)效能評(píng)價(jià)工作經(jīng)驗(yàn),,持續(xù)推進(jìn)醫(yī)療健康行業(yè)大模型成熟度系列標(biāo)準(zhǔn)研制,,建立針對(duì)不同醫(yī)療任務(wù)的大模型成熟度評(píng)價(jià)細(xì)則,確保標(biāo)準(zhǔn)貼合實(shí)際應(yīng)用需求,,促進(jìn)能力提升和應(yīng)用落地,。(完)
社區(qū)文化網(wǎng)
社區(qū)文化概況 | 關(guān)于社區(qū)文化 | 人才招聘 | 聯(lián)系我們 | 法律聲明 | 郵箱 | 網(wǎng)站地圖 | 人員查詢(xún)