語(yǔ)音識(shí)別、機(jī)器翻譯等人工智能技術(shù)，構(gòu)建了一套復(fù)雜而精確的手語(yǔ)翻譯引擎，可實(shí)現(xiàn)由文字及音視頻內(nèi)容到手語(yǔ)的翻譯，再通過(guò)專門為手語(yǔ)優(yōu)化研發(fā)的自然動(dòng)作引擎，進(jìn)行虛擬形象的驅(qū)動(dòng)。這些技術(shù)使得AI手語(yǔ)主播具備高可懂度的手語(yǔ)表達(dá)能力和精準(zhǔn)連貫的手語(yǔ)呈現(xiàn)效果。

令人翹首期盼的2022年北京冬奧會(huì)即將舉行。在關(guān)注冬奧會(huì)的人群中，有一個(gè)特殊的群體，他們雖然聽(tīng)不到賽場(chǎng)的聲音，但也希望能了解比賽動(dòng)態(tài)，渴望感受比賽的激情。據(jù)統(tǒng)計(jì)，全球約有4.3億人患中度及以上程度的聽(tīng)力障礙，根據(jù)全國(guó)第二次殘疾人抽樣調(diào)查數(shù)據(jù)，中國(guó)約有聽(tīng)障人士2780萬(wàn)人。

“我們用技術(shù)跨越聲音的障礙。”11月24日，央視新聞聯(lián)合百度智能云推出的央視總臺(tái)首個(gè)AI手語(yǔ)主播正式亮相——她有著真人般的皮膚、頭發(fā)、眼睛，形象親切自然，氣質(zhì)優(yōu)雅獨(dú)特。從北京冬奧會(huì)開(kāi)始，她將全年無(wú)休用AI智慧為聽(tīng)障用戶提供手語(yǔ)服務(wù)，讓他們快捷的獲取比賽資訊。

可提供專業(yè)、準(zhǔn)確的手語(yǔ)解說(shuō)

據(jù)悉，9月24日，曾在2021中關(guān)村論壇上亮相的冬奧手語(yǔ)播報(bào)數(shù)字人系統(tǒng)是由北京市科委、北京市殘聯(lián)發(fā)起，科技冬奧專項(xiàng)支持，北京智譜AI、凌云光與北京廣播電視臺(tái)聯(lián)合打造。項(xiàng)目還得到了北京市殘聯(lián)聾人協(xié)會(huì)的大力支持。系統(tǒng)依托智譜AI打造的數(shù)據(jù)與知識(shí)雙輪驅(qū)動(dòng)的智能平臺(tái)，旨在實(shí)現(xiàn)冬奧會(huì)期間賽事新聞的實(shí)時(shí)手語(yǔ)翻譯播報(bào)。

而此次央視新聞與百度智能云聯(lián)合打造的央視總臺(tái)首個(gè)AI手語(yǔ)主播，從表情、口型、毛發(fā)、服飾身形五大維度打造3D高精超寫實(shí)的數(shù)字人AI模型，讓AI驅(qū)動(dòng)的數(shù)字人表情則更加親切自然。

據(jù)介紹，百度智能云采用語(yǔ)音識(shí)別、機(jī)器翻譯等人工智能技術(shù)，構(gòu)建了一套復(fù)雜而精確的手語(yǔ)翻譯引擎，可實(shí)現(xiàn)由文字及音視頻內(nèi)容到手語(yǔ)的翻譯，再通過(guò)專門為手語(yǔ)優(yōu)化研發(fā)的自然動(dòng)作引擎，進(jìn)行虛擬形象的驅(qū)動(dòng)。這些技術(shù)使得AI手語(yǔ)主播具備高可懂度的手語(yǔ)表達(dá)能力和精準(zhǔn)連貫的手語(yǔ)呈現(xiàn)效果。

冬奧AI手語(yǔ)主播掌握的手語(yǔ)詞匯規(guī)范都來(lái)自《國(guó)家通用手語(yǔ)詞典》，經(jīng)過(guò)長(zhǎng)時(shí)間的智能學(xué)習(xí)，能夠?yàn)橛^眾提供專業(yè)、準(zhǔn)確的手語(yǔ)解說(shuō)。

AI手語(yǔ)主播的工作空間或?qū)⒏?/p>

據(jù)介紹，百度智能云的數(shù)字明星運(yùn)營(yíng)平臺(tái)為AI手語(yǔ)主播提供了技術(shù)支持和服務(wù)。

目前，數(shù)字明星運(yùn)營(yíng)平臺(tái)支持二次元、2D、3D高精多種數(shù)字人風(fēng)格;同時(shí)，在內(nèi)容生產(chǎn)維度支持真人驅(qū)動(dòng)、AI驅(qū)動(dòng)、融合驅(qū)動(dòng)等多種直播方式;基于領(lǐng)先的跨模態(tài)技術(shù)，口型合成準(zhǔn)確性達(dá)98.5%。

“隨著AI技術(shù)的更迭和進(jìn)化，3D虛擬場(chǎng)景不斷拓展，冬奧AI手語(yǔ)主播的工作空間會(huì)更大。也許不久AI主播會(huì)走出演播室，在不同場(chǎng)景中更好地滿足新聞呈現(xiàn)多樣化的需求。”相關(guān)項(xiàng)目負(fù)責(zé)人表示。

這個(gè)冬奧會(huì)，也將通過(guò)冬奧AI手語(yǔ)主播，讓更多的殘障人士酣暢淋漓地感受冰雪運(yùn)動(dòng)的激情與榮耀。(華凌)