9月13日,以“OpenVINO™ 加速 PC 及小型設(shè)備 LLM 性能”為主題的Intel OpenVINO™ DevCon中國系列工作坊2024活動(dòng)在北京舉行,相芯科技作為Intel合作伙伴受邀出席并在會(huì)上分享“通過使用OpenVINO™ 工具套件,讓數(shù)字人基于Intel iGPU和獨(dú)立GPU 進(jìn)行性能優(yōu)化和推理加速的實(shí)踐應(yīng)用”。
相芯科技市場(chǎng)總監(jiān)Lisa表示:“目前依賴高算力AI能力的數(shù)字人應(yīng)用大都基于云服務(wù),成本較高,相芯一直在探索更低成本的部署方案,以降低用戶使用門檻,OpenVINO™工具套件在數(shù)字人低成本部署探索方面有著出色的表現(xiàn),相芯與Intel的合作可謂一拍即合。”
OpenVINO™是英特爾基于自身現(xiàn)有的硬件平臺(tái)開發(fā)的一種可以加快高性能計(jì)算機(jī)視覺和深度學(xué)習(xí)視覺應(yīng)用開發(fā)速度的工具套件。旨在通過模型、優(yōu)化、部署三個(gè)簡(jiǎn)單的開發(fā)步驟,實(shí)現(xiàn)深度學(xué)習(xí)模型的優(yōu)化和“一次編寫,任意部署”,無論是在CPU(中央處理器)、GPU(圖形處理器單元)、NPU(神經(jīng)網(wǎng)絡(luò)處理器)還是FPGA(可編程邏輯器件)上,都能實(shí)現(xiàn)模型的快速落地部署,從而加速深度學(xué)習(xí)模型推理工作流程。
在會(huì)上,Lisa介紹了相芯基于OpenVINO™ 2024.0版本打造數(shù)字人和AR視頻特效的整體開發(fā)框架。Lisa表示,OpenVINO™支持多種格式模型,通過OpenVINO™的優(yōu)化工具可以對(duì)這些模型進(jìn)行轉(zhuǎn)換和壓縮,在不降低效果的情況下,減少模型尺寸。同時(shí),在加載和編譯模型的時(shí)候,借助OpenVINO™自帶的編譯選項(xiàng)還可以快速進(jìn)行編譯優(yōu)化。
“為了更好地平衡性能和功耗,我們還可以將多個(gè)模型分別放在CPU、GPU、NPU上進(jìn)行推理,如GPU適合做渲染流水線AI,所以我們的數(shù)字人渲染在GPU上進(jìn)行推理,NPU專用低功耗AI引擎可以用于持續(xù)性AI處理任務(wù),我們的AR視頻特效就跑在NPU上,可以在直播和視頻會(huì)議中實(shí)現(xiàn)更好的實(shí)時(shí)美顏效果。”
OpenVINO™為開發(fā)者提供了更為強(qiáng)大的性能支持和擴(kuò)展能力,助力開發(fā)者高效利用AI加速技術(shù)。相芯基于OpenVINO™ 2024.0版本打造的數(shù)字人和AR視頻特效也在會(huì)上亮相,吸引了眾多與會(huì)者關(guān)注討論。
Lisa表示,以前大部分?jǐn)?shù)字人AI應(yīng)用只能在云GPU上跑,需要依賴高算力顯卡如4090、A100等,成本較高。但基于OpenVINO™,相芯不僅能讓AI數(shù)字人應(yīng)用在PC端流暢運(yùn)行,更能在配置集成顯卡的普通輕薄筆記本上運(yùn)行,極大降低了數(shù)字人應(yīng)用的資源損耗和成本,為中小型企業(yè)和個(gè)人用戶提供了更多的可行性。
同時(shí),基于 OpenVINO™打造AR視頻特效在各項(xiàng)美顏指標(biāo)上也都有著出色的表現(xiàn),不僅可以精準(zhǔn)檢測(cè)出雀斑、痘痘等瑕疵并有效去除,在保障膚色均勻同時(shí),還可以對(duì)特征痣和皮膚的肌理感進(jìn)行保留,讓美顏效果真實(shí)自然,避免“假面感”。
最后,Lisa透露,相芯科技正在與Intel展開深度合作,探索將AI數(shù)字人和AR視頻特效技術(shù)嵌入到設(shè)備底層,這不僅能讓更多合作伙伴受益,還能讓普通用戶通過設(shè)備原生的技術(shù)能力,在直播、社交等應(yīng)用場(chǎng)景中獲得更好的體驗(yàn)。她最后補(bǔ)充道:“我們期待與Intel及更多行業(yè)伙伴攜手合作,探索數(shù)字人應(yīng)用的更多可能性,為各行業(yè)打造新質(zhì)生產(chǎn)力創(chuàng)造更多可能性!”
(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請(qǐng)進(jìn)一步核實(shí),并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí),應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 )