9月13日,以“OpenVINO? 加速 PC 及小型設(shè)備 LLM 性能”為主題的Intel OpenVINO? DevCon中國系列工作坊2024活動在北京舉行,相芯科技作為Intel合作伙伴受邀出席并在會上分享“通過使用OpenVINO? 工具套件,讓數(shù)字人基于Intel iGPU和獨立GPU 進行性能優(yōu)化和推理加速的實踐應(yīng)用”。

相芯科技市場總監(jiān)Lisa表示:“目前依賴高算力AI能力的數(shù)字人應(yīng)用大都基于云服務(wù),成本較高,相芯一直在探索更低成本的部署方案,以降低用戶使用門檻,OpenVINO?工具套件在數(shù)字人低成本部署探索方面有著出色的表現(xiàn),相芯與Intel的合作可謂一拍即合?！?

OpenVINO?是英特爾基于自身現(xiàn)有的硬件平臺開發(fā)的一種可以加快高性能計算機視覺和深度學(xué)習(xí)視覺應(yīng)用開發(fā)速度的工具套件。旨在通過模型、優(yōu)化、部署三個簡單的開發(fā)步驟,實現(xiàn)深度學(xué)習(xí)模型的優(yōu)化和“一次編寫,任意部署”,無論是在CPU(中央處理器)、GPU(圖形處理器單元)、NPU(神經(jīng)網(wǎng)絡(luò)處理器)還是FPGA(可編程邏輯器件)上,都能實現(xiàn)模型的快速落地部署,從而加速深度學(xué)習(xí)模型推理工作流程。

在會上,Lisa介紹了相芯基于OpenVINO? 2024.0版本打造數(shù)字人和AR視頻特效的整體開發(fā)框架。Lisa表示,OpenVINO?支持多種格式模型,通過OpenVINO?的優(yōu)化工具可以對這些模型進行轉(zhuǎn)換和壓縮,在不降低效果的情況下,減少模型尺寸。同時,在加載和編譯模型的時候,借助OpenVINO?自帶的編譯選項還可以快速進行編譯優(yōu)化。

“為了更好地平衡性能和功耗,我們還可以將多個模型分別放在CPU、GPU、NPU上進行推理,如GPU適合做渲染流水線AI,所以我們的數(shù)字人渲染在GPU上進行推理,NPU專用低功耗AI引擎可以用于持續(xù)性AI處理任務(wù),我們的AR視頻特效就跑在NPU上,可以在直播和視頻會議中實現(xiàn)更好的實時美顏效果?！?

OpenVINO?為開發(fā)者提供了更為強大的性能支持和擴展能力,助力開發(fā)者高效利用AI加速技術(shù)。相芯基于OpenVINO? 2024.0版本打造的數(shù)字人和AR視頻特效也在會上亮相,吸引了眾多與會者關(guān)注討論。

Lisa表示,以前大部分數(shù)字人AI應(yīng)用只能在云GPU上跑,需要依賴高算力顯卡如4090、A100等,成本較高。但基于OpenVINO?,相芯不僅能讓AI數(shù)字人應(yīng)用在PC端流暢運行,更能在配置集成顯卡的普通輕薄筆記本上運行,極大降低了數(shù)字人應(yīng)用的資源損耗和成本,為中小型企業(yè)和個人用戶提供了更多的可行性。

同時,基于 OpenVINO?打造AR視頻特效在各項美顏指標(biāo)上也都有著出色的表現(xiàn),不僅可以精準(zhǔn)檢測出雀斑、痘痘等瑕疵并有效去除,在保障膚色均勻同時,還可以對特征痣和皮膚的肌理感進行保留,讓美顏效果真實自然,避免“假面感”。

最后,Lisa透露,相芯科技正在與Intel展開深度合作,探索將AI數(shù)字人和AR視頻特效技術(shù)嵌入到設(shè)備底層,這不僅能讓更多合作伙伴受益,還能讓普通用戶通過設(shè)備原生的技術(shù)能力,在直播、社交等應(yīng)用場景中獲得更好的體驗。她最后補充道:“我們期待與Intel及更多行業(yè)伙伴攜手合作,探索數(shù)字人應(yīng)用的更多可能性,為各行業(yè)打造新質(zhì)生產(chǎn)力創(chuàng)造更多可能性!”