近日，京東AI聯(lián)合生態(tài)合作伙伴相芯科技打造了3D虛擬主播，基于計算機3D圖形學、語音內(nèi)容識別以及深度學習技術，對真人主播聲音、唇形、表情動作等特征進行提取，利用NeuHub京東人工智能開放平臺的語音合成、語音識別和多輪對話能力，經(jīng)深度學習和訓練，讓虛擬主播也具備了和真人主播一樣的實時播報能力，并且實現(xiàn)了雙語播報。
目前該技術已在NeuHub京東人工智能開放平臺正式上線，這項新技術目前適用于新聞資訊播報、廣電虛擬演播室、融媒體平臺內(nèi)容生產(chǎn)中心、新媒體、直播網(wǎng)站虛擬網(wǎng)紅、智能客服虛擬形象升級等多種場景之中。
隨著互聯(lián)網(wǎng)技術的飛速發(fā)展，網(wǎng)絡視頻、手機視頻成為主流的內(nèi)容形式，真人直播、主持人等職業(yè)成為求職市場上的“香餑餑”。然而真人主播、主持人、人工客服等培養(yǎng)培訓成本很高，工作強度大，還有檔期的限制，AI虛擬主播技術的誕生，有效地解決了這些問題，大大地提高了視頻的應用范圍和工作效率。
京東AI和相芯科技聯(lián)合打造的3D虛擬主播技術則可以讓靜態(tài)主持人圖片“活”過來，并根據(jù)輸入的文本信息自動形成播報視頻。有了播報內(nèi)容文本，就有了“主播”，通過在線云端語音合成引擎合成，達到讓“主播“實時說話的效果，進而生成相應的播報視頻。
據(jù)悉，該產(chǎn)品具備幾大特征。首先是強大的定制能力，包含語音和形象定制，提供高自然度、有感情、個性化的語音合成服務，支持中英文雙語，并可以定制個性化語音庫;結合相芯科技在CG形象方面的驅(qū)動技術及模型積累，可根據(jù)個人形象(照片)或者地方文化名人形象(畫像)，定制真人或卡通形象，滿足不同場景需求。
語音驅(qū)動口型匹配。通過AI語音動畫技術智能識別語音或文本，自動匹配口型，疊加表情信息，輔助動作腳本設計，持續(xù)實時驅(qū)動3D虛擬形象。這就意味著該技術的適配性更高，不會受到播報內(nèi)容文本的限制，大大提升了該技術的使用性。
人臉關鍵點檢測，實現(xiàn)表情實時驅(qū)動。通過攝像頭捕捉真人表情，智能檢測人臉區(qū)域并標記特征點(眼、口、鼻、眉、面部輪廓等)，不斷對人臉特征和表情進行自適應，同步至3D虛擬形象面部，驅(qū)動3D虛擬形象動畫;支持47種面部表情，及10種舌頭動作，靈動逼真。
NeuHub京東人工智能開放平臺從建立之初就本著開放共贏的心態(tài)積極引入生態(tài)合作伙伴共同實現(xiàn)人工智能技術在各產(chǎn)業(yè)的落地。針對不同類型的合作伙伴，京東AI發(fā)布了AI生態(tài)合作伙伴煉金計劃，旨在連接AI創(chuàng)業(yè)伙伴、地方政府和品牌企業(yè)，深入場景，融合產(chǎn)品攜手生態(tài)伙伴，成就AI價值。煉金計劃包含服務提供類、渠道合作類及集成創(chuàng)新類合作伙伴，京東AI為三類伙伴提供全渠道的品牌催化、技術催化及業(yè)務催化，與合作伙伴攜手創(chuàng)造有溫度的AI(煉金計劃申請鏈接。截至日前，NeuHub京東人工智能開放平臺生態(tài)已吸納超過300家優(yōu)秀的合作伙伴，并與超過10家合作伙伴深度合作進行聯(lián)合產(chǎn)品打造。
作為產(chǎn)業(yè)開發(fā)者和生態(tài)伙伴，相芯科技僅是京東人工智能開放平臺NeuHub的一個縮影。未來將會有更多的產(chǎn)業(yè)開發(fā)者，調(diào)用NeuHub平臺的AI能力，結各自產(chǎn)業(yè)痛點，引發(fā)AI+產(chǎn)業(yè)的化學反應。同時，產(chǎn)業(yè)開發(fā)者在產(chǎn)業(yè)應用過程中的成果和實踐又可以反哺AI技術的迭代、更新。京東AI助力更多人成為產(chǎn)業(yè)開發(fā)者，讓產(chǎn)業(yè)加上AI的能力，扶持更多的千億產(chǎn)業(yè)領軍企業(yè)，推動社會文明進步。
- 歐盟欲斷碳纖維供應鏈，日本材料業(yè)面臨挑戰(zhàn)：禁碳能否突圍？
- 微信新功能引熱議，騰訊高管回應沖上熱搜：理性討論，勿過度解讀
- 順風車司機高速上開輔助駕駛剪指甲？官方回應：嚴查違規(guī)行為
- 2024年車市競爭白熱化，賽力斯領跑毛利率，理想汽車能否后來居上？
- 阿里云助力地平線智駕大模型訓練：從云端到端，智能駕駛再提速
- 供應鏈揭秘：iPhone若重返美國制造，售價飆升至令人咋舌的2.5萬元
- 華盛頓州特斯拉超充站爆炸疑云：小型炸彈引發(fā)？真相待解
- 劉強東下單蔚來ET9，李斌親自交車：這輛電動跑車會如何改變他的出行方式？
- 阿里云劉偉光：揭秘未來新模式：AI Agent Store，讓智能生活更進一步
- 阿里云百煉創(chuàng)新助力：MCP服務部署與調(diào)用輕松實現(xiàn)，幾分鐘搭建Agent，高效運維新篇章
免責聲明：本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性，但不保證有關資料的準確性及可靠性，讀者在使用前請進一步核實，并對任何自主決定的行為負責。本網(wǎng)站對有關資料所引致的錯誤、不確或遺漏，概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權或存在不實內(nèi)容時，應及時向本網(wǎng)站提出書面權利通知或不實情況說明，并提供身份證明、權屬證明及詳細侵權或不實情況證明。本網(wǎng)站在收到上述法律文件后，將會依法盡快聯(lián)系相關文章源頭核實，溝通刪除相關內(nèi)容或斷開相關鏈接。
