多知6月13日消息,在2025上海AWE煥新消費節的家享生活展館中,3D數字導購「小淘」以近乎真人的形態與觀眾自然互動。MNN TaoAvatar是阿里巴巴基于其開源的輕量級深度學習推理框架MNN開發的3D數字人技術。這項融合3D高斯重建、AI語音驅動與端側大模型的尖端技術,突破傳統數字人局限,實現從“二次元偶像”到“3D真人復刻”的躍遷。
在智能交互上,TaoAvatar結合當前最前沿的大模型技術,依托阿里集團的通義千問開源模型和MNN開源推理引擎,在端側部署了輕量化的ASR-LLM-TTS語音問答鏈路。TaoAvatar在Apple Vision Pro上的對話延遲穩定在1~2秒,基于導購領域專業知識微調的Qwen2.5-1.5B模型,設備端內存占用僅為1.2GB,在輕量化的同時保持了高效響應。
這款創新技術將高保真的3D虛擬形象生成與實時交互能力帶到移動設備,為直播、虛擬社交和AR應用等領域帶來全新可能性。
目前,該項目地址已公開(https://github.com/alibaba/MNN),開發者可通過豐富的API和文檔快速上手,定制屬于自己的3D數字人應用。
一本書洞察教育行業全貌,《教育科技這一年:教育+AI新紀元》火熱銷售中從業者必入,點擊小程序購買?
掃碼加入多知新書交流群,共同探討教育+AI的未來
特別聲明:以上內容(如有圖片或視頻亦包括在內)為自媒體平臺“網易號”用戶上傳并發布,本平臺僅提供信息存儲服務。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.