近日,新暢元首次公布數字人技術戰略,并發布前沿技術2D AvatarVerse,這項技術國際領先,在過去幾年的CVPR、SIGGRAPH、ICCV、ECCV等計算機視覺或人工智能頂會多次發表,將由近期上線的創視元首發搭載。
率先實現2D AvatarVerse商業化
據官方介紹,2D AvatarVerse 在只有5分鐘視頻的條件下,便可以學習到從交互行為到真人形象的映射關系,從而對現實人物進行高真實感真人圖像生成。用戶據此能夠實現創建具備專業用途的高真實感數字人,通過跨模態方式驅動數字人并制作視頻和進行直播,從根本上提升內容創作的效率,實現批量化生產。
新暢元發布前沿技術2D AvatarVerse,是市場上唯一一家可提供該項技術的公司。區別于僅靠唇形驅動的數字人,AvatarVerse是指整個數字人都是由算法生成且可驅動的,表情、動作都可以自由生成,表現得更為自然、流暢、有個性,極大豐富了數字人的不同應用場景。
相比Meta現階段的方案,新暢元數字人采集便捷且算法更優、算力需求小
新暢元正式發布數字人技術戰略
新暢元正式發布數字人技術戰略,官方表示,2D AvatarVerse是新暢元Verse引擎計劃之一,其技術優勢在于效果真實自然。未來,新暢元還將推出顛覆式的3D AvatarVerse,采用近年來學術界備受關注的神經輻射場(NeRF)作為底層表征,未來通過產品的方式與大家見面。
據了解,新暢元Verse引擎即全生成數字人技術AvatarVerse和數字人的相關的一系列技術(比如語音、文本/肢體語義理解等),它的出現將加速數字人技術應用落地,填補產業缺項。新暢元將持續推進Verse引擎計劃,致力于構建一個安全可靠、充滿活力的數字智能生態系統,為各行各業提供強大而全面的技術支持。
新暢元聯合創始人兼CEO邱見明博士表示,“在生成式數字人領域,算法將扮演更重要的角色,而高質量的算法能力是新暢元打造AIGC數字人多模態內容生成與互動系統的核心競爭力。”
新暢元擁有來自于清華大學、微軟、阿里巴巴等機構及科技大廠的核心技術人員,覆蓋軟硬件技術開發、投融資等不同領域。截至目前,團隊于2023年已在CVPR2023*發表文章2篇,在SIGGRAPH2023*發表文章5篇,ICCV2023發表4篇。新暢元首席科學家劉燁斌教授的清華團隊通過研究虛擬數字人的采集系統級相關技術,曾獲國家發明技術一等獎。清華團隊的多相機采集系統,能夠在現有的硬件條件下獲得效果最佳、精度最高的采集數據,新暢元團隊也因此在多圖像三維重建精度方面連續7年排名國際第?。