相芯科技攜手京東AI打造虛擬主播，助力媒體融合發(fā)展

半夜突發(fā)新聞，主播趕不及進(jìn)行播報(bào)怎么辦?視頻錄制到一半，主播突發(fā)身體不適怎么辦?視頻節(jié)目正當(dāng)紅，主播突然換人，影響到節(jié)目本身怎么辦?

近日，相芯科技攜手京東AI一起打造虛擬主播“京小蕾”“京小帥”，以高科技手段破解真人主播的現(xiàn)實(shí)“困境”，撬動(dòng)傳統(tǒng)媒體轉(zhuǎn)型升級(jí)，助力媒體融合發(fā)展。

“京小蕾”“京小帥”是語(yǔ)音技術(shù)與形象技術(shù)的完美結(jié)合。它們的語(yǔ)音是利用了NeuHub京東人工智能開(kāi)放平臺(tái)的語(yǔ)音合成、語(yǔ)音識(shí)別和多輪對(duì)話(huà)能力，形象則是基于相芯科技的計(jì)算機(jī)圖形學(xué)、語(yǔ)音識(shí)別和深度學(xué)習(xí)技術(shù)，對(duì)真人主播聲音、唇形、表情動(dòng)作等特征進(jìn)行提取，進(jìn)而實(shí)現(xiàn)虛擬主播像真人一樣的實(shí)時(shí)播報(bào)能力。

“有了這一技術(shù)，不僅可以讓主播24小時(shí)全天候、高質(zhì)量地進(jìn)行播報(bào)，還大大節(jié)省了視頻制作時(shí)間，提升了視頻制作效率。”談及研發(fā)虛擬主播產(chǎn)品的初衷，相芯科技相關(guān)負(fù)責(zé)人介紹道，在媒體融合發(fā)展的過(guò)程中，許多優(yōu)質(zhì)內(nèi)容常常因發(fā)布不及時(shí)，無(wú)法最先觸達(dá)受眾，從而使傳統(tǒng)媒體在與新媒體的競(jìng)爭(zhēng)中一度處于不利位置。

過(guò)去，要制作一段新聞播報(bào)視頻，傳統(tǒng)媒體需要搭建演播室，配備真人主播、多臺(tái)攝像機(jī)，視頻錄制及編輯人員等，費(fèi)時(shí)又費(fèi)力。如今，有了這款產(chǎn)品，只需打開(kāi)操作后臺(tái)，輸入一段文字或語(yǔ)音，就可實(shí)時(shí)生成相應(yīng)的播報(bào)視頻，并支持中、英雙語(yǔ)播報(bào)，可謂方便又快捷，專(zhuān)業(yè)十足。

同時(shí)，該產(chǎn)品還具有強(qiáng)大的定制能力，包含形象和語(yǔ)音兩部分。形象部分，由相芯科技通過(guò)自主研發(fā)的語(yǔ)音動(dòng)畫(huà)合成技術(shù)(STA：Speech To Animation)和美術(shù)定制能力，根據(jù)個(gè)人形象(照片)或者地方文化名人形象(畫(huà)像)，定制3D真人或卡通形象，滿(mǎn)足不同場(chǎng)景需求。語(yǔ)音部分，由京東AI開(kāi)放平臺(tái)提供自然度、有感情、個(gè)性化的語(yǔ)音合成服務(wù)，及個(gè)性化語(yǔ)音庫(kù)定制。這意味著，打造一個(gè)人美聲甜、技能滿(mǎn)分的虛擬主播IP，將指日可待。

此外，該產(chǎn)品還可支持真人實(shí)時(shí)驅(qū)動(dòng)。通過(guò)攝像頭捕捉真人面部表情、動(dòng)作，智能檢測(cè)人臉區(qū)域并標(biāo)記特征點(diǎn)，不斷對(duì)人臉特征和表情進(jìn)行自適應(yīng)，并同步至3D虛擬形象，從而實(shí)現(xiàn)實(shí)時(shí)驅(qū)動(dòng)，并錄制成相關(guān)視頻。

“和相芯科技的合作是京東人工智能開(kāi)放平臺(tái)真誠(chéng)開(kāi)放，和合作伙伴共同落地AI技術(shù)的一個(gè)縮影。”京東AI相關(guān)負(fù)責(zé)人說(shuō)，與相芯科技的合作，將進(jìn)一步拓寬京東AI創(chuàng)新應(yīng)用的邊界，引發(fā)AI+產(chǎn)業(yè)的化學(xué)反應(yīng)。

作為一家專(zhuān)注于智能圖形技術(shù)創(chuàng)新與應(yīng)用的高科技公司，相芯科技一直致力于好萊塢電影級(jí)特效技術(shù)在消費(fèi)級(jí)應(yīng)用中的普及，目前擁有增強(qiáng)現(xiàn)實(shí)視頻SDK(AR Video SDK，包括表情識(shí)別/人臉AR濾鏡和道具/視頻美顏/視頻分割/手勢(shì)識(shí)別等)、虛擬化身創(chuàng)建服務(wù)PTA(Photo-to-Avatar，從一張照片生成虛擬形象、自主裝扮虛擬形象及與虛擬形象互動(dòng)等)、語(yǔ)音動(dòng)畫(huà)合成引擎STA(虛擬主播、虛擬客服、虛擬助手等)多款產(chǎn)品，覆蓋了短視頻、直播、社交、新零售、智能家居、廣告、醫(yī)療、媒體等多個(gè)領(lǐng)域，已服務(wù)400余家客戶(hù)。

此次，相芯科技與京東AI的合作，將助力虛擬主播觸達(dá)更多行業(yè)、領(lǐng)域，不斷升級(jí)這一技術(shù)、迭代這一產(chǎn)品，讓科技紅利惠及更多企業(yè)和個(gè)人。

據(jù)悉，在新聞資訊播報(bào)、廣電虛擬演播室之外，虛擬主播還可適用于融媒體平臺(tái)內(nèi)容生產(chǎn)中心、新媒體、直播網(wǎng)站虛擬網(wǎng)紅、智能客服虛擬形象升級(jí)等多種場(chǎng)景之中，致力于幫助更多媒體或企業(yè)增加人性化服務(wù)，提升內(nèi)容制作效率。

目前，該技術(shù)已在NeuHub京東人工智能開(kāi)放平臺(tái)正式上線(xiàn)。

生成海報(bào)

免責(zé)聲明：本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請(qǐng)進(jìn)一步核實(shí)，并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏，概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí)，應(yīng)及時(shí)向本網(wǎng)站提出書(shū)面權(quán)利通知或不實(shí)情況說(shuō)明，并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后，將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí)，溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。