愛爾眼科數(shù)字人“愛科(Eyecho) ”正式發(fā)布 ,可支持視頻、文本和語音等多模態(tài)交互
10月26日,由集團(tuán)研發(fā)的愛爾數(shù)字人“愛科(Eyecho)”在東北大學(xué)附屬遼寧愛爾眼科醫(yī)院區(qū)域眼科醫(yī)學(xué)中心開診儀式上正式發(fā)布。作為一款行業(yè)前沿的科技創(chuàng)新成果,愛爾數(shù)字人“愛科(Eyecho)”集合了當(dāng)今生成式人工智能和計算機(jī)圖形學(xué)領(lǐng)域目前zui為前沿的技術(shù)——基于AIGC與神經(jīng)渲染的高真實感數(shù)字人合成,通過神經(jīng)渲染技術(shù)刻畫高真實感數(shù)字人形象;基于檢索增強(qiáng)技術(shù)RAG,構(gòu)建了蘊(yùn)含眼科領(lǐng)域知識的垂類大語言模型AierGPT;基于自注意力網(wǎng)絡(luò)架構(gòu),實時根據(jù)文本合成個性化聲音;模仿海量自然人體運(yùn)動的視頻序列,通過文本指引合成自然真實人體運(yùn)動實現(xiàn)親近互動。會上發(fā)布了可用于多個場景的愛爾數(shù)字人,分別是:面向患者術(shù)前教育的實時可交互數(shù)字人——“愛爾名醫(yī)患教數(shù)字人”,可以轉(zhuǎn)換各醫(yī)院各科室醫(yī)生的形象,以專業(yè)的愛爾眼科垂類大模型為底座,布署在醫(yī)院各科室,面向患者提問,實時回復(fù)包括白內(nèi)障、屈光、視光、眼底、青光眼、角膜及眼表等全眼科問題。另一款是用于總部大樓、醫(yī)院大廳及各類形象展示的虛擬雙語數(shù)字人。還有一款可布署在手機(jī)端、用于患者術(shù)后服務(wù)的——“愛爾名醫(yī)陪伴數(shù)字人”,可支持視頻、文本和語音等多模態(tài)交互,也即將投入應(yīng)用。“愛科(Eyecho)”的名字既體現(xiàn)愛爾“創(chuàng)新驅(qū)動,科技愛爾”的發(fā)展戰(zhàn)略,也起英文Echo“回音”之意,蘊(yùn)含愛爾運(yùn)用zui新的人工智能技術(shù),提升臨床效率,提高服務(wù)質(zhì)量,給予患者更好服務(wù)回報的理念。“愛科(Eyecho)”的研發(fā)由愛爾數(shù)字眼科研究所、集團(tuán)教育與科技管理中心牽頭,遼寧愛爾、深圳愛爾、長沙愛爾100余名臨床專家參與知識庫建設(shè),集團(tuán)信息中心、健康教育中心協(xié)同,湖南湘江公益基金會提供支持。集團(tuán)提出“數(shù)字眼科”行業(yè)發(fā)展新模式。聯(lián)合中國科學(xué)院計算技術(shù)研究所等優(yōu)質(zhì)科技創(chuàng)新力量,充分挖掘千萬級數(shù)據(jù)價值,以眼科學(xué)及視覺科學(xué)融合計算技術(shù)與人工智能等交叉學(xué)科,布局兼顧前沿性和應(yīng)用性的關(guān)鍵核心課題,聯(lián)動遍布全球的眼科醫(yī)療場景展開示范應(yīng)用,形成創(chuàng)新資源聚集、產(chǎn)學(xué)研協(xié)同、數(shù)字化賦能的新型科技創(chuàng)新平臺。10月26日面世發(fā)布的愛爾數(shù)字人就是數(shù)字眼科的重點(diǎn)科技攻關(guān)項目。