据悉,北京中科深智科技有限公司(简称“中科深智”)与北京邮电大学近日正式签署了合作协议,联合成立“北邮-中科深智元宇宙联合实验室”。北京邮电大学相关领导、人工智能学院院长刘亮教授、人工智能学院李雅副教授、中科深智创始人兼CEO成维忠、中科深智总裁施忠、中科深智CTO宋健等对该实验室的建成表示热烈祝贺。
北邮-中科深智元宇宙联合实验室挂牌
据悉,本次合作中,双方就联合研发元宇宙相关核心技术、建设适合国内应用场景且具有国际先进水平的前沿技术研发等合作达成共识,将共同探索XR、AI、计算机视觉、3D动画等方向,推动各类元宇宙相关技术的落地。通过共建元宇宙联合实验室,充分发挥各自领域专长和优势,升级合作,加强资源整合,围绕元宇宙技术研发、高端人才培养、科技创新赋能、核心专利共建等方面加强合作。
为更好展开元宇宙技术研究工作和创新实践,打造一流的元宇宙实验室,携手攻坚元宇宙行业的“卡脖子”难题,北京邮电大学和中科深智将为元宇宙实验室投入大量研发资源,并由优异的专家学者加盟参与项目研究工作。北京邮电大学智能科学与技术中心是北邮方的实验室具体建设承担单位,智科中心李雅副教授担任实验室主任,中科深智CTO宋健、北京邮电大学王小捷教授将担任实验室技术顾问。此外,联合实验室还设立多名由领域资深专家组成的学术委员会,他们将共同为项目带来前瞻的视野和专业的指导。该联合实验室将为元宇宙领域的校企合作提供了新的思路。
在未来元宇宙的发展中,3D实时动画技术是打破虚实交互壁垒的关键性技术,它是元宇宙和相关应用场景的影像承载技术,是人们能够沉浸式体验虚拟世界的保障,也是实现真正虚实交互的基础。一般来说,实时动画技术分为模型资产自动制作、动作表情实时驱动以及实时渲染三大技术板块,其中动作表情实时驱动是最为影响工作效率、阻碍虚实交流和内容生产的最关键技术。因此中科深智自2016年开始,就深耕动作表情驱动领域,目前已经成为多模态生成动作驱动的领跑企业。
中科深智创始人兼CEO成维忠表示,动作和表情驱动是虚拟人技术的关键,依赖单一技术难以满足所有应用场景,也很难通过传统动作捕捉或动作预设满足未来需求。而中科深智自研的Motionverse多模态动作生成驱动引擎,融合了XR和AI技术,可根据不同场景,支持语音、文本、摄像头等目前所有的驱动方式,实现多模态动作指令输入。在此基础上,Motionverse的AI动作表情生成系统能够实时生成千人千面的动作和表情,赋予虚拟人更强表现力和生命力。
中科深智创始人兼CEO 成维忠
据悉,中科深智围绕动作表情驱动核心技术,把数字资产库和图形风格化等技术纳入Motionverse,形成实时动画中台,实现核心技术中台化、云端化,既能通过不同SDK赋能合作伙伴,也能快速响应用户需求实现产品化。
Motionverse实现了高效率、低成本、大批量、全自动的多模态动作数据解析、生成、影像渲染及内容输出,打造行业的通用型能力,赋能各行各业。这一核心技术的革新,在业内受到同行、客户和投资人的广泛关注和认可。
面对近年来爆火的元宇宙行业,北京邮电大学也早已关注到这一领域的技术发展和前景。实验室主任北京邮电大学李雅老师表示,元宇宙基建设施逐渐完善,各项技术蓬勃发展,未来可期。此次携手中科深智共建元宇宙联合实验室,是北邮首个元宇宙研究实验室,也是国内高校最早一批成立的元宇宙实验室。北京邮电大学智能科学与技术中心在相关方面具有深厚的技术积累,校企双方在人工智能和扩展现实领域强强联合,对推动增强现实、虚拟现实等领域产学研一体化,具有极强的创新价值。
北京邮电大学副教授 李雅
谈及与北京邮电大学人工智能学院的深度合作,中科深智CTO宋健表示,北京邮电大学素来被称为互联网人才的“黄埔军校”,一直走在科技研究的前沿。人工智能学院的师资力量在全国名列前茅,在元宇宙领域的研究方向、科研实力等方面与中科深智十分匹配,双方计划在元宇宙、数字人领域开展合作,主要专注于困难的、有长期价值的课题进行。目前,双方已经开始在基于LED墙的XR拍摄技术领域展开了合作,针对如何实时清除高分辨率摄像机拍摄LED墙上带有的摩尔纹这一技术难题,该项目的研究成果将被会极大地提升LED墙的拍摄效果和应用范围,并且也将降低LED墙的部署成本,该成果将会应用于中科深智的DeepArt智能拍摄系统中。另外,在数字人语音驱动方面,也开始有些论文发表。宋健还表示,今后,中科深智还将为元宇宙实验室相关课题研究提供精准的市场需求、商业大数据等企业资源,在虚拟人建设、驱动、语音语义理解等方面双方开展深度合作。此次合作协议的签署,标志着双方在元宇宙技术方面的创新探索迈出了新的一步。双方将秉承相互开放、优势互补、互利共赢的原则,共同推进元宇宙核心技术创新,为打造技术前瞻、应用可靠、满足不同场景需求的技术和产品能力而努力,该合作也将进一步提升中科深智在元宇宙和XR影像领域的技术领先度。
