每一次人机交互的更迭,都在推动时代变革。12月29日,在百度Create 2021·小度智能生活论坛上,百度集团智能助手首席架构师、小度科技CTO朱凯华对外发布了全新升级的小度助手7.0。作为小度最核心的AI技术能力,小度助手升级到7.0版本,具备更加强大的多模态感知及理解能力,同时配备多项业界创新技术功能,实现更加自然、真实、更具人格化的人机交互体验,引领智能生活进入“环绕智能”新时代。
据了解,小度助手已成为中国最大的对话式人工智能操作系统,搭载小度助手的设备月均交互次数达66亿次,可连接的IoT智能家居设备已超2亿。Canalys、Strategy Analytics、IDC三大权威机构报告显示,2021年上半年,小度智能屏出货量全球先进,小度智能音箱出货量中国知名。伴随小度助手7.0重磅发布并全面上线小度旗下系列智能产品及IoT设备,一场由技术突破催动的智能时代革新,已然拉开序幕。
赋能终端多模态感知+理解能力,硬核技术再升级
此次推出的小度助手7.0在技术实力方面更加成熟强大,可以为终端设备赋能,使其具备语音、视觉、以及多设备协同下的多模态感知与理解能力。
小度设备在语音对话和听觉上的卓越表现已被大众用户熟知,小度系列智能设备均可实现语音交互,还能“听清”、“听懂”用户的多种需求,如天气查询、新闻播报、生活百科、影音娱乐、生活提醒等,是生活中的好帮手。
在视觉感知理解方面,添添智能健身镜独创的“火柴人”投影技术,就是小度视觉感知理解能力的最好展现。在用户锻炼时,添添智能健身镜镜面可实时生成用户的AI“火柴人”,给予精准的运动反馈。
这一技术的背后,在于添添健身镜运用了专门AI边缘计算芯片、超广角高帧率摄像头等硬件配置,并且搭载了全新升级的小度助手7.0。添添智能健身镜上的AI摄像头可实时捕捉用户的运动动作并将画面输入进AI芯片,获得每秒30帧、19个人体重要骨骼点的关键点数据。这些数据在经过平滑、补帧的前处理后,会结合当前用户的使用场景动态加载计数、计时或动作纠正模型,从而进行理解匹配和动作纠正,动作检测精准度高达99.7%。检测结果以“数字火柴人”的形态投影在镜面上,将运动反馈精准传递给用户。
在这一过程中,用户的隐私至关重要。在添添智能健身镜上,AI边缘计算芯片捕捉到的都是骨骼关键点而非图片,所有视觉理解算法都是在设备本地化而非通过云端计算来完成,用户大可放心自己的隐私。
不仅如此,小度还拥有繁荣的AI生态,小度助手7.0可为多种IoT设备赋能,让技术实力不断延伸。
多项创新黑科技加持,人机交互体验再升级
进入7.0时代,小度助手在人机交互体验端也进行了全面升级,搭载多项业内创新的AI技术,实现跨设备的多模态感知和理解的无缝融合。
其中,小度业界创新的“全双工免唤醒”能力在小度助手7.0上升级到2.0模式,可以实现“延长聆听”,支持全场景全领域下,用户只需一次唤醒小度,就能进行多轮对话。小度助手7.0还创新了“快捷指令词”功能,用户不用再说“小度小度”,而是像人与人自然聊天一样,呼唤“小度”两个字就能唤醒设备,全面适应用户多维个性化习惯。与此同时,小度助手7.0还能智能判断用户的沟通对象,如果用户是在跟小度对话,小度能立刻给用户答案,如果不是,小度就会结束交互,让人机互动更加自然。这些功能将逐步覆盖小度智能硬件产品。
此外,在小度助手7.0上,创新的PCAN模型「Personalized Contextual Attention Network for Large-scale Goal Tracking,个性化上下文注意力网络做超大规模需求追踪」也被应用其中。在它的加持下,小度设备能够通过用户过往的交流习惯、话术动作等,预判和理解用户的需求,同时PCAN模型还能“自主”学习,用户使用小度的次数越多,小度助手就会越来越聪明,越来越懂你。
小度助手7.0现已被广泛应用在添添智能健身镜、小度智能摄像头电视等小度智能硬件及IoT设备。
通过这些设备,小度助手7.0将数字世界的内容和服务“编织”进物理世界,让人工智能时刻环绕用户左右,不断适应用户习惯、了解用户偏好,在用户需要时及时响应,在不需要时隐入环境,为用户打造“环绕智能”全场景智能生活。
智能生态愈发繁荣,人机交互方式更加先进的背后,正是一场由AI技术飞跃带来的深刻变革。小度助手自2017年问世起不断革新升级,持续探索人机交互的无限可能。未来,小度还将继续围绕“打造无处不在的人工智能助手”的企业愿景,用人工智能助力人和设备的交互更自然,助力生活更加简单、美好。