橙皮书｜座舱交互：ChatGPT 改变不了的智能座舱，多模可以

在DMS感知解决方案供应商方面，地平线、商汤和宏软的市场份额排名前三。一些组织预测，到2026年，DMS的渗透率将达到35%，DMS/OMS在车辆上的趋势势不可挡。

然而，在一年前的“2021智能驾驶室橙色手册”中，我们对当时的DMS/OMS功能进行了不太积极的评估：“故障制造机”。这是因为在之前的驾驶舱评估中，由于DMS/OMS在疲劳监测、分心警告、烟雾警告和其他场景中的错误触发和错误警报，它确实造成了麻烦，使得我们当时无法给出更高的评价。去年中旬，系统判定小眼“开车睡觉”的“黑龙”事件也让更多人意识到DMS/OMS功能所面临的问题：角色生理特征的差异、动作习惯的差异、，甚至需求的差异也决定了DMS/OMS在实际应用中需要解决许多问题。

如何提供更准确、更合适的服务，避免因虚假触发和虚假提醒而造成混乱，是DMS/OMS这个自我救赎道路上的“麻烦制造者”能否得到改善的关键。一方面，需要对常见的功能场景进行梳理，并通过对场景的判断来过滤可能的误报。另一方面，有必要为技术标准制定合理、科学的指标。一个人是否处于疲劳状态？处于什么疲劳状态？这不是一个简单的“是或否”问题。因此，以单一和机械化的方式设置触发阈值不可避免地会导致错误触发和错误警报。如何细化和细化触发器是提高DMS/OMS性能的关键。在过去的一年里，许多新车型都配备了DMS/OMS功能。以奇瑞瑞虎8PRO为例，它配备了AI情感超级交互系统，基于人脸识别和视线跟踪，第一时间检测驾驶员的肢体语言，判断疲劳程度和分心状态，并智能推送聊天、音乐音量、空调温度等场景模式，帮助驾驶员缓解疲劳。

为了探索如何准确控制触发阈值，我们专门采访了奇瑞瑞虎8PRO的相关产品和研发人员，以及该DMS系统供应商地平线的研发人员。为了使触发标准更加准确合理，避免虚假触发，奇瑞瑞虎8PRO和地平线的DMS团队对驾驶员的状态监测进行了仔细划分：以分心场景为例，为了使触发阈值更加准确，分心提醒的重点被细分为十四个区域；这14个区域根据其对驾驶行为的影响分为不同的级别，如危险区和警告区；驾驶分心的危险性会随着你的眼睛停留在不同区域的时间而自然变化。同时，驾驶员的分心和疲劳进一步分为轻度、中度和重度。。。不同水平对外部刺激的生理反应，以及不同时间间隔的预警效果，都可以让DMS/OMS提供更准确、更详细的服务。

未来，随着驾驶舱传感器数量和性能的提高，以及驾驶舱集成度的提高，驾驶舱DMS/OMS功能不仅需要摄像头、毫米波雷达等单个传感器提供的指标，还需要多维感知信息，通过多维信息融合提供更可靠的决策输入；DMS/OMS本身成为驾驶舱内多模式交互的一部分。对于下一阶段的DMS/OMS供应商来说，他们不仅需要提供单一的软件算法能力，还需要提供软硬件集成能力，以及芯片和AI感知能力。当然，DMS/OMS本身的意义在于为用户提供安全、高效、便捷的服务。在提高能力的同时，他们可以区分用户真正需要的服务和不必要的中断；

笔记

拼音 双语对照除了避免驾驶舱摄像头给用户带来的隐私担忧外，这些问题仍然是该功能发展过程中需要解决的问题。多模式交互：多维信息的融合使交互更有可能发生，当人们看着一个窗口说“更大”时，窗口可以自动打开；当盯着空调说同样的话时，命令变成了多开一点空调；将你的目光锁定在窗外的环境上，然后说：“我想知道这座建筑的用途。”智能助手会自动帮助你查询并通知你结果

这是我们过去在概念车中看到的场景。采用多模态交互技术，将语音、视觉、手势识别等多种交互方式集成在驾驶舱中，满足了每个人对未来技术感的想象。在过去的几年里，除了物理按钮、旋钮、触摸控制等传统交互形式外，我们已经看到语音交互、手势交互、面部识别等多种交互方式在智能座舱中共存，并已成为行业主流。然而，与以往多种互动方式“单打独斗”、各自为政的情况相比，多模式互动的本质是将不同的互动形式联系起来。通过多维信息与感知能力在不同交互形式下的互补性，系统可以在更接近自然人的状态下理解和执行人类的意图，甚至能够猜测人们的潜台词。

在过去的一年里，我们已经能够看到这种多模式交互尝试的基本形式。例如，在理想的L9中，采用了3DTof+语音交互融合的方法，手指指向遮阳伞，同时说“打开这个”，遮阳伞可以自动打开。对于一键打开遮阳板的操作来说，这种场景似乎没有太大吸引力，但其背后是语音和手势交互的融合能力，这为驾驶舱交互创造了更多可能性，例如提高交互精度。

在极狐阿尔法SHI版本的驾驶舱中，将语音识别和嘴唇运动识别相结合，通过视觉和语音的多模态融合，提高了在嘈杂密集的驾驶舱环境中语音识别的准确性；类似的视觉+语音融合方案被用于提高识别精度，而Horizon Halo是一种基于Horizon Journey 2和Journey 3的驾驶舱方案，通过视觉和语音等多传感器数据的融合实现主动交互。

以2022年出现在驾驶舱的全时免唤醒功能为例。在该功能下，语音助手将持续接收声音，不需要随时以唤醒词作为对话的起点，使语音交互更接近人与人之间的自然对话。为了达到这一效果，优化语音交互技术架构和语音基础能力至关重要；

笔记

拼音 双语对照

标签：奇瑞瑞虎8理想L9

汽车资讯热门资讯