HMI智能驾舱体验 汽车的多模态交互-上

HMI智能驾舱体验 汽车的多模态交互-上

2023.04.20

「汽车交互方式的多模式融合

 

汽车交互方式的转变

 

中国的汽车HMI支持多种通信模式(语音、指纹、手势、人脸等),并正在向多模式融合发展。

此外,HMI将从车内交互演变而来,到多场景互动,从被动交互到主动交互,例如:车辆预测驾驶员或乘客的需求并相应地做出响应做出相应的反馈。

 

 

手势识别已经在许多中国制造的车型中实现,如君马Seek 5奇瑞5X小鹏 G3 Premium,主要用于控制汽车的显示系统,即播放音乐、控制音量或放大地图,尽管使用案例可能会扩大。

 

(图片源于网络,侵删)

 

以及AR导航(荣威Marvel X)。吉利GKUI的升级版GKUI2019具有多种交互模式:按钮、旋钮、触摸、语音、手机、HUD、人脸识别、智能手表(主要用于远程汽车控制和查看车辆信息)和人脸识别。

 

 

大众PHIDEON是中国第一款提供基于摄像头的夜视系统作为标准配置。

 

(图片源于网络,侵删)

 

这个小鹏G3这是一款电动紧凑型SUV,车顶上安装了一个鳍状装置,可以抬起并旋转。“鳍状装置”实际上是一个摄像头,司机和乘客可以通过手机或手势在车内进行控制。

例如,一个和平的手势可以让你拍照,而“ OK ”的手势可以让相机回到面向前方的位置。相机还可以拍摄视频。Xpeng G3还使用摄像头作为其智能视觉系统的一部分,以促进面部识别和个性化,根据驾驶人员自动调整座椅位置和环境照明等。

 

人脸识别2018年在中国亮相,越来越多的车型可供选择,包括LeapMotor S01、奇瑞EXEED TX、WEY VV6、WM Motor的EX5和吉利星越。未来可能会有更多的使用刷脸进行支付认证。

 

 

这个威马汽车EX5-Z 这是一款智能纯电动SUV,使用前置摄像头来激活用户的“Super ID ”,这使得它可以根据每个驾驶员的喜好调整驾驶舱硬件和软件设置,并同步到用户的个人账户。

 

依托于Super ID系统,威马的用户无论在哪里使用威马的产品,它的车外交互信息、灯光、音乐、座椅位置等都会根据用户云端身份信息自动设定,车内语音识别也会提供个性化服务。

 

(图片源于网络,侵删)

 

 

小鹏G3提供驱动程序疲劳警报和心跳监测,通过OTA升级。

 

长安UNI-T的智能车载系统使用摄像头和AI芯片跟踪闪烁率通过面部表情和打哈欠来检测司机是否疲劳。该系统提醒驾驶员,根据感知到的疲劳程度使用不同的策略。如果有人出现轻度疲劳,系统将使用语音提醒,而严重疲劳则会提示车辆打开车窗,调低空调并播放音乐。

 

(图片源于网络,侵删)

 

 

奇瑞星途TX,一款电动SUV,内置百度的DuerOS支持刷脸支付、增强现实的人工智能平台导航和远程控制家用电器。它还通过定制信息问候司机,并自动调节座椅和灯光。

 

(图片源于网络,侵删)

 

 

领跑汽车的“Leap In 生物钥匙系统”允许驾驶员使用手指静脉识别和面部识别解锁车辆。

集成软件和硬件解决方案提供商Goodix在Lynk&Co 05中提供其车载指纹认证系统。The Goodix 系统使用指纹识别来锁定和解锁车门,以及行李箱和杂物箱。它还存储了多个用户配置文件,以便驾驶员可以设置驾驶偏好。

 

(图片源于网络,侵删)

 

 

 

「智能语音助手你的新副驾

 

国内的人工智能发展速度比大多数西方国家都要快。许多车型都配备了智能车载助理,然而,最好的助手不仅仅是“智能助理”——他们为驾驶体验增加了真正的价值。

为了加快这些技术的应用,车厂正在战略性地选择赢得用户信任的设计和品牌战略。他们经常选择拟人化的词汇来描述人工智能,如“伴侣”或“助理”,以鼓励情感联系,并消除司机对新技术的恐惧。

 

蔚来在Google发布的机器学习开源框架TensorFlow的帮助下,开发出的NOMI这个小伙伴,它不是一个生冷的机器,而是有情绪、有生命的好伙伴。它“有礼貌、会倾听、会思考、知冷暖”,与您一路同行。

 

(图片源于网络,侵删)

 

NOMI 可以学习并理解用户发出的各种复杂指令:调节温度、开关车窗、导航定位、监控车况等。车主在驾驶过程中将无需自己动手,只需指挥 NOMI 便可帮助自己完成操作。

除此以外NOMI还有模糊语音精确识别、自主学习快速成长、多轮对话准确理解、个性化的、基于知识图谱的智能问答功能等超级功能。

 

 

合众U的智能机器人是基于生物识别、智能语音,大数据分析和深度学习能力,小You智能机器人可以实现情感互动和人性化自然语音交流,具备疲劳驾驶提醒、全车AI语音控制、智能家居控制等实时主动交互功能等,紧急情况下更会自动连接合众eCall主动救援服务后台及时呼救。

 

(图片源于网络,侵删)

 

该智能机器人能通过场景分类优化AI算法,掌握驾驶员的生活方式和喜好,主动向驾驶者提出场景化的服务推送,实现人与车的自然交流。比如,坐在副驾驶上的女朋友生气了,小You可以讲个笑话哄她开心;后排孩子睡着了,小You会自动调低音乐音量,并适当降低空调风量;如果汽车电量即将耗尽,小You还会在行驶途中提醒充电并推荐途经地点的充电点。

 

 

“小天”是天际汽车打造的用户与车情感化交流的智能助手,通过丰富而有趣的语音和语义识别,可以提供诸多人性化服务。

作为用户与汽车情感化交流的桥梁,AI智能助手“小天”可以实现自然语义的对话,为用户带来车辆控制、智能提醒、聊天对话等功能。同时,“小天”支持6种声音选择,可盐可甜,每天换种新口味。未来,小天还将通过OTA升级提供声音定制等更多个性化选择。

 

(图片源于网络,侵删)

 

得益于强大的车载计算能力和云计算平台,天际“小天”可以实现丰富的车载语音控制功能,比如开启灯光、打开天窗、设定空调、开启自动泊车等。不仅如此,“小天”还可以实时查询路况、天气指数等信息,为你制定最完备的出行攻略,躲避拥堵顺畅出行。当用户在日历中添加重要节日、邮件会议后,贴心的“小天”还可以进行智能提醒。

 

 

理想智造ONE就搭载了全新的Wiki语音助手,并且是和小米旗下的小爱同学共同打造。

 

(图片源于网络,侵删)

 

理想ONE语音助手显示在车辆的中控屏幕中。它看起来像个钟。当不使用时,但当用户与它交互时,它会转变为人脸。AIWAYS在CES Asia 2019上展示了其“智能伴侣技术”概念。用户可以通过将照片上传到aIways应用程序来创建个性化的虚拟助理,该应用程序使用AI识别和Unity 3D技术来创建独特的头像。连声音都可以个性化!这意味着用户可以创建看起来像自己或爱人的车内助理,从而加强人机连接。还可以识别车辆乘员的情绪并做出相应的反应。

 

 

小鹏汽车发布了全场景语音功能,使其智能语音助手小P不仅做到了识别精准、反应速度超快,而且可以实现连续对话、语义打断、高精度语音控制等高级交互能力,是当前车载智能语音之中功能最强的产品。

 

(图片源于网络,侵删)

 

小鹏汽车推出行业首个用户视角的车载智能语音系统评价标准:

 

【多】——即指可用语音操作功能数量,用户可以用同样数量的「高频指令」去与车辆对话,可实现功能较多的车辆则表现更加优秀;

【快】——即指语音操作的完成效率,用户可以测试在1分钟内,连续通过语音发出指令,看车辆能完成的指令数量,完成越多则表现更加优秀;

【好】——即指语音播报的舒适程度,用户可以通过对比该声音与真人的相似程度、音质是否清晰细腻及喜欢该声音的程度,在0-10分内对车辆进行主观打分,得分越高则表现越好;

【爽】——即指语音交互的自由度,用户可以通过不同的指令和语音操作,去测试车辆是否支持连续对话、语义打断、可见即可说、多音区识别等功能,让用户在使用语音交互时更接近正常对话方式,从而在0-10分内对车辆进行主观打分,得分越高则表现越好;

 

 

长安uni-T它不仅会在你打开车门时打招呼,还会根据你的面部表情更新问候语。它也自动更改车内环境,以提供舒适和便利。例如,如果你的电话响了,它会降低收音机的音量,然后在你结束通话时恢复它。如果您正在使用导航系统,并且有错过下一个转弯的危险(因为您的转向灯没有打开,并且您没有看向正确的方向),助理将使用声音和图像来提醒您。

 

(图片源于网络,侵删)

 

此外还配了《王者荣耀》流行的“妲己”语音包,让语音识别变得更加有趣。更重要的是,长安UNI-T的车载微信支持全语音交互,基本不用手动进行输入。另外方向盘还设置了专属的“微信”按键,最大程度的保障了操作的便利性。

 

 

BMW智能个人助理(IPA)是宝马最新一款新的语音和人工智能驱动的虚拟助理。新的IPA将率先在全新的BMW 7系和BMW i7车型上应用。

 

(图片源于网络,侵删)

 

BMW智能个人助理具备自我学习功能的系统,可以逐步了解驾驶者的偏好,并通过语音提示用户想知道的具体功能,从而最大限度地提高他们在道路上的安全性、效率和舒适度。国内的BMW智能个人助理现在添加了语音控制微信的关键功能,如发送消息或拨打语音电话。

 

 

 

「车内的新娱乐体验」

 

长安UNI-T的自拍功能,非常符合当下年轻消费群体的刚需。只要说出语音指令,即可开启拍照功能,若检测到有人闭眼主动提醒重拍。说出语音指令“我要拍照”或“321拍”,即可启动3秒倒计时拍照功能,系统可自动识别用户年龄和性别并显示身份标签,如“18岁”、“小姐姐”等。而且,车机与手机可以互联互通,用户可将照片发送给In Call手机APP进行下载和分享。

 

(图片源于网络,侵删)

 

 

2022年7月26日,马斯克又在推特上一声令下,今后特斯拉车主将会免费新增一项功能,可在车内免费卡拉OK。

 

在此之前,广州汽车集团股份有限公司申请的“一种车辆卡拉OK音频处理方法及系统、存储介质”专利公布。

 

长安欧尚X5的车载KTV功能非常有看点,首创无麦车载KTV,即无需麦克风,通过语音就能点歌,还匹配大屏歌词界面。而且,长安欧尚X5能为全车人员提供互动嗨唱体验,车内的每一位乘客都可以参与进来。

 

比亚迪宋PLUS结合DiLink系统,全系标配车载麦克风和专属充电底座,,配合Dirac音效系统,配合卡拉OK应用,可以将整个车舱改造成可以"K歌"的音乐座舱。

 

(图片源于网络,侵删)

 

 

车载游戏作为我们座舱设计的一部分,正在逐渐将传统的汽车内饰变成一个时尚的移动游戏站,让我们的出行变得更加有趣。当然,这些游戏的实现还依赖于无人驾驶技术的实现。

 

车载游戏的交互方式主要有触屏(中控、前后排屏、车窗、天窗)、手柄、驾驶、手势、语音、气味儿、音频头枕等交互形式。在行驶中,可以结合游戏,配合气味儿(比如,玩家穿过草地时会闻到新鲜的草味)、声音、震动、风速、氛围灯辅助,为用户带来更沉浸式的游戏体验。

 

(图片源于网络,侵删)

 

 

从劳斯莱斯的满天星,到奔驰上的64种颜色的氛围灯,越来越多的车辆都有氛围灯的配置,例如:奔驰的S级、E级、迈腾、东风标志2008、别克威朗、凯迪拉克ct6为枯燥的行车过程提供了别样色彩。

 

氛围灯的作用不再是为车内提供简单照明那么简单的作用,氛围灯能以不同的颜色,明亮程度制造出不同的气氛和情调,让驾驶者和乘客在漫漫的长途旅行中不至于那么的无趣与烦闷。

 

(图片源于网络,侵删)

 

 

蔚来ES8内置一个高清摄像头和数码相册,因此人们可以轻松地拍摄和分享照片。甚至有自己的社交媒体平台,用户可以在上面分享旅行照片和他们最喜欢的驾驶经历的故事。

 

在车内通过NOMI拍摄的照片仅支持U盘导出,本次更新增加了将车内照片上传至云端的功能。进入中控屏-相册,选中自己想要上传的照片(目前尚不支持视频)后依次点击“编辑-传输-传输至蔚来App”,即可将照片上传至车机当前登陆的蔚来账户下。在照片上传完毕后,用户可以进入NIOApp爱车页面,点击右上角小齿轮,选择云相册就可以查看和管理自己上传的照片了。

 

(图片源于网络,侵删)

 

 

爱驰汽车使用手机增强现实(AR)和语音技术来创建更有趣和互动的用户手册。AR使汽车驾驶舱看起来像一艘宇宙飞船,并在具有令人难忘的个性的小型机器人角色的帮助下,以有趣的方式呈现手册中的不同元素。

 

(图片源于网络,侵删)