2022云栖大会于11月3日在杭州云栖小镇举办,大会以“计算・进化・未来 " 为主题,带来全新的科技碰撞!中科深智聚焦动作和表情的实时生成引擎研发,作为NVIDIA初创加速计划会员企业,本次带来了基于多模态动作和表情生成的3D虚拟人实时互动技术展示。
中科深智以深度学习支撑的多模态动作生成驱动引擎架构为核心,自主研发强大且极具扩展性的Motionverse虚拟人业务中台系统。以虚拟人驱动为核心,集成其他实时动画和元宇宙技术,助力各类元宇宙和数字人业务发展。
多模态动作表情生成技术 真正的AI数字人互动
展会现场,只见“顾客”对着屏幕跟虚拟蛋糕店3D小妹提出购买蛋糕的需求,3D小妹便会看着“顾客”,回答蛋糕店所包含的蛋糕种类和口味供“顾客”选择,帮助顾客完成点餐,同时也可以正常的与顾客打招呼交流。与市场上呆板的2D虚拟人不同,中科深智的多模态动作和表情生成技术,可以驱使虚拟人“声情并茂”的与顾客进行对话交流,使顾客体验到真正的AI数字人互动。
据悉,目前中科深智已形成“核心技术→业务中台→系列SDK→系列标准产品→不同应用场景”的经营策略,赋能政企、文旅、教育、医疗、消费和IPTV 等六大行业。同时,中科深智是国内虚拟人SAAS商业化落地非常成熟的公司,针对特定场景的应用产品,不仅推出了类似蛋糕妹这样的需求客服,还先后推出了1)自动播— 极具性价比的AI虚拟直播带货产品,可支持7*24小时播放,已经服务了超2000家客户,目前已占主流电商虚拟主播近70%份额。2)自动画——AI数字人动画创作平台,可快速实现3D动画制作,引领3D内容生产突破性变革。
强强联合 加速推进行业发展
据悉,在2021年,中科深智加入到 NVIDIA 初创加速计划(NVIDIA Inception)成为其中的一员。NVIDIA Omniverse 作为可实现 3D设计协作和真实模拟的可扩展式多 GPU 虚拟世界平台,中科深智Motionverse 接入 NVIDIA Omniverse平台,通过 Omniverse平台的开源模块化架构,为Motionverse创建了更多落地场景,赋能数字人技术开发。而中科深智多模态实时驱动引擎Motionverse 平台则通过SDK方式,帮助开发者在数字人动作与表情生成环节变得更加高效生动。
此次云栖大会展出的蛋糕店数字人销售系统,则是使用 Omniverse ACE 底层的功能模块,将AI赋能的客户服务引入零售商店、快捷餐厅甚至网络的典型代表。该应用将中科深智动作与表情生成平台Motionverse和NVIDIA Maxine、NVIDIA Riva 和 NVIDIA NeMO等NVIDIA AI SDK结合,在NVIDIA的高性能GPU上运行,成就了展位上蛋糕店3D虚拟数字人互动点餐的落地场景。
文章来源:中科深智