在座舱多模态交互系统中,手势识别功能正在成为主流的配置之一。高工智能汽车研究院监测数据显示,2022年中国市场(不含进出口)乘用车前装标配手势识别功能交付37.39万辆;今年1-4月交付23.90万辆,同比增长超过300%。
在品牌搭载分布来看,自主品牌(理想、长安、广汽、长城、岚图等)占据手势识别功能标配的主要市场,相比而言,合资品牌(奔驰、宝马等)以选装为主。
去年开始,作为国内新势力的领跑企业,理想汽车在旗下L9、L8、L7等车型标配手势识别功能,这套方案基于Melexis的3D深度传感器MLX75027,每秒可捕获135个距离帧,确保手势控制和眼动追踪应用中的快速响应。
在理想汽车智能空间副总裁勾晓菲看来,智能汽车的交互方式应该是自然交互,即通过语音、手势的三维空间交互。为了进一步提升用户体验,今年理想汽车还升级了后舱娱乐屏手势交互出界提醒功能,当手势移出最佳的识别区域后,屏幕中的手势光标会变淡。
目前,在前装市场,地平线、虹软、科大讯飞、百度Apollo是主要的手势识别算法及方案提供商。其中,地平线是为数不多可以提供“芯片+算法+工具链”的厂商之一,从而帮助tier1和车企基于自身需求灵活定制化开发。
而在Tier1方面,博泰车联网也是国内少数已经实现前装量产的供应商之一。目前,博泰的擎AI语音平台能基于对用户偏好的理解,融合图像识别、手势交互、情绪感知等多感官融合交互方式,预判用户需求。
比如,博泰车联网自岚图FREE起,为其搭载特色的软硬云三端完整的座舱解决方案,包括了:全球首创的一体式可升降三联屏、用户体验领先的智能语音引擎、多模交互的HMI设计、个性化定制的虚拟智能助手等。
而继岚图FREE之后,岚图梦想家是博泰车联网与东风岚图合作的第二款量产车型,搭载高通8155芯片,支持触屏手势、隔空手势识别、人脸识别、声纹识别以及智能语音等多种方式进行多模态的交互。
在该公司看来,由于硬件的发展以及交互手段的多样化(从单一按钮到触屏、语音、手势、人脸眼球识别等发展),HMI的设计趋势由车内仪表正处在由“信息展示+弱交互”向“信息展示+强交互”发展。
智华科技也是业内首批量产乘用车前装市场智能座舱监测系统(IMS)的Tier1供应商,实现视线追踪、分级疲劳监测、分神监测、危险行为监测、活体检测等安全守护功能,以及身份识别、手势识别、情绪音乐、唇动检测等个性交互功能。
这套方案已经在广汽传祺旗下多款车型量产,同时提供覆盖范围由驾驶员到乘员、技术路径由视觉感知到毫米波雷达融合感知的灵活产品矩阵,并支持第三方算法适配。
从早期的语音交互,到驾驶员注意力监控、疲劳预警再到手势交互,这样的多模态交互系统与驾驶员辅助系统一起形成合力,正在帮助提升行车安全以及舱内的体验。
在高工智能汽车研究院看来,再加上AR HUD、生命体征监测、智能触控面板等其他舱内技术,结合多模态人机交互,意味着智能座舱进入真正的智能2.0时代。
目前,整个座舱域控制器赛道仍处于硬件换代升级、软件融合集成阶段。比如,软件部分,随着座舱的更多人机交互、体验智能化等功能上车,包括DMS、OMS、HUD、手势交互以及泊车(舱泊一体概念)等软件模块都将被集成于更高性能的座舱域控制器。
其中,在芯片端,除了高通平台,今年芯擎科技首发的7nm车规级高性能座舱SoC(龍鹰一号),除了支持一芯多屏多系统,也整合了语音识别、手势控制、液晶仪表、HUD、 DMS 以及ADAS融合等功能。
在即将交付的领克08车型上,芯擎科技与亿咖通合作,首发搭载双龍鹰一号+Flyme Auto车机操作系统,支持隔空手势与常用功能的结合,比如,比心点赞(收藏)音乐,相机拍照;全局弹框确认,电话接听,多媒体播放;全局取消操作,旋转手势调整音量等功能。
随着车端算力的快速提升,更多传感器的搭载,基于计算+多感知的舱内人机交互赛道,正在成为新的市场风口。行业也从过去聚焦智能语音交互、多屏互动升级至多模态交互。
高工智能汽车研究院监测数据显示,2022年中国市场(不含进出口)乘用车同时标配信息娱乐中控、语音、Face ID(含DMS、OMS)交付183.90万辆,前装搭载率为9.23%;今年1-4月,交付79.37万辆,前装搭载率升至14.03%。
而对于手势识别功能来说,得益于上车传感器的硬件复用,以及AI算力加持、算法模型优化,后续市场增量逻辑与几年前初创公司(大部分企业已经退出汽车赛道)的孤军突围,已经有了质的改变。