一文读懂智能汽车驾驶员监控系统
驾驶员监控系统,缩写DMS,是英文Driver Monitor System的缩写,即驾驶员监控系统。主要是实现对驾驶员的身份识别、驾驶员疲劳驾驶以及危险行为的检测功能。
福特DMS系统
01 法规加持,DMS进入发展快车道
在现阶段开始量产的L2-L3级自动驾驶中,其实都只有在特定条件下才可以实行,很多状况下需要驾驶员能及时接管车辆进行处置。因此,在驾驶员太信任自动驾驶而放弃或减弱对驾驶过程的掌控时可能会导致某些事故的发生。而DMS-驾驶员监控系统的引入可以有效减轻这一问题的出现。
麦格纳DMS系统,截取自麦格纳介绍视频
因此,近年来各国的政策法规等多方面开始推进DMS的上车:欧盟和中国均出台法律法规。国内已率先对“两客一危”等商用车车型安装DMS系统作出强制要求,乘用车搭载要求也在推进制定中。而欧盟则将DMS纳入Euro NCAP五星安全评级的关键要素,而且是必要条件。几乎是从2020年开始,DMS系统的装车率快速提升,行业进入发展快车道。
21年7月由工信部、公安部和交通运输部联合印发的《智能网联汽车道路测试与示范应用管理规范(试行)》强调要求智能网联汽车要具备在线监控功能,可以反映驾驶人和人机交互状态的车内视频及语音监控情况。
02 视觉方案-DMS技术方案简介
DMS的核心功能主要是疲劳监测、分心监测、危险行为监测。早期的DMS方案主要通过非生物特征的技术来实现,比如通过方向盘及转向传感器,监测任何不稳定的方向盘运动、车道偏离或无故改变速度等。但由于系统复杂,非直观感知,整体的搭载率一直很低。
早期的DMS由于非直观感知,可能会误导系统判断。来源,知乎康斯坦丁.DC
现阶段的DMS则大多是基于摄像头的面部识别和眼球跟踪技术,通过红外光等采集驾驶员面部信息再经过算法分析出人员当下的身体状态,在检测到驾驶员处于不安全状态时,再通过闪烁红光或是方向盘震动等方案对驾驶者进行提醒。整个系统的硬件部分是由摄像头+集成座舱车机/域控制器解决方案组成;软件部分则主要涉及AI视觉算法。
图片来源 Eyesight
2D/3D的摄像头配置
目前大部分用于检测驾驶员疲劳的驾驶员监测系统均采用成本较低的传统2D可见光摄像头(配合IR红外LED)。
水晶光电DMS摄像头简介
理想L9的DMS系统
2022年,理想L9搭载了Melexis的3D-ToF传感器,并将之应用DMS系统。这种采用近红外光的3D光学传感技术可以构建驾驶员头部“深度图”,通过“深度图”可以精准的分析驾驶员的独特面部特征,性能远超2D技术。除了Melexis外,NXP、艾迈斯欧司朗等也都有类似的技术方案布局。
摄像头的集成
这一摄像头主要安装在正对驾驶员的位置,包括车内后视镜/行车记录仪,方向盘、仪表中控屏以及A柱等。考虑到整体内饰的美观性,摄像头的集成也成为一个备受关注的课题。
麦格纳将摄像头集成在后视镜中
天马发布可集成DMS摄像头的挖孔屏
DMS系统的功能拓展
驾驶员监控系统的基础功能是疲劳监测、分心监测、危险行为监测。但随着2D/3D摄像头的引入以及人脸识别算法的发展,DMS系统也在融合ADAS等自动驾驶技术的发展,催生出了一些创新人机交互HMI智能化的场景应用,提升高级别自动驾驶/智能网联汽车时代的驾乘体验。
大陆集团DMS系统,来源大陆官网
作为创新人机交互的传感器,这些DMS功能的拓展功能主要是获取驾驶员信息,从而进一步完善未来汽车座舱中的新应用,并实现定制化体验:
1、面部身份识别
当用户靠近传感器时,无需动作配合,即可快速完成活体判断并进行身份识别,主动为用户打开车门,调整座椅位置,并快速登陆车机系统,保障座舱系统高效运行。
面部识别的引入,不仅提升了驾驶的舒适体验,更可以提高车辆使用安全,比如说防盗功能。
2、眼球追踪
利用摄像头进行视野追踪、头部姿态跟踪技术,识别出驾驶员注视的区域(主驾挡风玻璃、副驾挡风玻璃、左后视镜……)。这一功能可以与当前热门的HUD抬头显示系统联动,可以实时调整并为驾驶员提供更合适的显示画面。
松下AR HUD
3、手势识别
手势识别,基于视觉手势识别技术,与车机系统相连,提供新的结合方式,通过车载摄像头完成全部功能。如做了相应手势之后,主机会进行歌曲切换或静音等操作,具体定义由各个主机厂自己定义。
手势交互方案属于在传统触摸控制方案之外的新交互方案,在宝马上已经应用多年。这个摄像头与DMS系统也可以产生一定联动。
4、表情识别,情绪感应
通过创新AI算法,识别出驾驶员当下的情绪,可以联动氛围灯、香氛系统。这种应用丰田在CES 2019上有展示。
丰田纺织的 AceS概念
5、娱乐互动
自动驾驶技术研发商MINIEYE在其I-CS座舱感知量产方案中创新性地打通了前后排的互动空间,借助视线、手势、头部动作等多种自然身体语言的交互方式,可实现多人多位置便捷互动。
图源MINIEYE
6、座舱乘员检测OMS
将专门对应驾驶员的摄像头拓展到整个座舱内部,可以进一步提升整体车内的安全性。
通过位于车顶的摄像头,并结合毫米波雷达的感知数据,系统可以综合分析人脸属性、人体骨骼比例以及身长信息,能够准确判断成人与儿童。当识别到儿童,系统将主动触发儿童看护功能,持续对儿童进行状态、行为监测,并实时反馈给前排家长,提醒其采取必要措施。
以上是一文读懂智能汽车驾驶员监控系统的详细内容。更多信息请关注PHP中文网其他相关文章!

热AI工具

Undresser.AI Undress
人工智能驱动的应用程序,用于创建逼真的裸体照片

AI Clothes Remover
用于从照片中去除衣服的在线人工智能工具。

Undress AI Tool
免费脱衣服图片

Clothoff.io
AI脱衣机

Video Face Swap
使用我们完全免费的人工智能换脸工具轻松在任何视频中换脸!

热门文章

热工具

记事本++7.3.1
好用且免费的代码编辑器

SublimeText3汉化版
中文版,非常好用

禅工作室 13.0.1
功能强大的PHP集成开发环境

Dreamweaver CS6
视觉化网页开发工具

SublimeText3 Mac版
神级代码编辑软件(SublimeText3)

智能应用控制是Windows11中非常有用的工具,可帮助保护你的电脑免受可能损害数据的未经授权的应用(如勒索软件或间谍软件)的侵害。本文将解释什么是智能应用控制、它是如何工作的,以及如何在Windows11中打开或关闭它。什么是Windows11中的智能应用控制?智能应用控制(SAC)是Windows1122H2更新中引入的一项新安全功能。它与MicrosoftDefender或第三方防病毒软件一起运行,以阻止可能不必要的应用,这些应用可能会减慢设备速度、显示意外广告或执行其他意外操作。智能应用

如此强大的AI模仿能力,真的防不住,完全防不住。现在AI的发展已经达到了这种程度吗?你前脚让自己的五官乱飞,后脚,一模一样的表情就被复现出来,瞪眼、挑眉、嘟嘴,不管多么夸张的表情,都模仿的非常到位。加大难度,让眉毛挑的再高些,眼睛睁的再大些,甚至连嘴型都是歪的,虚拟人物头像也能完美复现表情。当你在左侧调整参数时,右侧的虚拟头像也会相应地改变动作给嘴巴、眼睛一个特写,模仿的不能说完全相同,只能说表情一模一样(最右边)。这项研究来自慕尼黑工业大学等机构,他们提出了GaussianAvatars,这种

本文经自动驾驶之心公众号授权转载,转载请联系出处。原标题:MotionLM:Multi-AgentMotionForecastingasLanguageModeling论文链接:https://arxiv.org/pdf/2309.16534.pdf作者单位:Waymo会议:ICCV2023论文思路:对于自动驾驶车辆安全规划来说,可靠地预测道路代理未来行为是至关重要的。本研究将连续轨迹表示为离散运动令牌序列,并将多智能体运动预测视为语言建模任务。我们提出的模型MotionLM具有以下几个优点:首

轨迹预测近两年风头正猛,但大都聚焦于车辆轨迹预测方向,自动驾驶之心今天就为大家分享顶会NeurIPS上关于行人轨迹预测的算法—SHENet,在受限场景中人类的移动模式通常在一定程度上符合有限的规律。基于这个假设,SHENet通过学习隐含的场景规律来预测一个人的未来轨迹。文章已经授权自动驾驶之心原创!笔者的个人理解由于人类运动的随机性和主观性,当前预测一个人的未来轨迹仍然是一个具有挑战性的问题。然而,由于场景限制(例如平面图、道路和障碍物)以及人与人或人与物体的交互性,在受限场景中人类的移动模式通

《ComputerWorld》杂志曾经写过一篇文章,说“编程到1960年就会消失”,因为IBM开发了一种新语言FORTRAN,这种新语言可以让工程师写出他们所需的数学公式,然后提交给计算机运行,所以编程就会终结。图片又过了几年,我们听到了一种新说法:任何业务人员都可以使用业务术语来描述自己的问题,告诉计算机要做什么,使用这种叫做COBOL的编程语言,公司不再需要程序员了。后来,据说IBM开发出了一门名为RPG的新编程语言,可以让员工填写表格并生成报告,因此大部分企业的编程需求都可以通过它来完成图

01什么是滑板底盘所谓滑板式底盘,即将电池、电动传动系统、悬架、刹车等部件提前整合在底盘上,实现车身和底盘的分离,设计解耦。基于这类平台,车企可以大幅降低前期研发和测试成本,同时快速响应市场需求打造不同的车型。尤其是无人驾驶时代,车内的布局不再是以驾驶为中心,而是会注重空间属性,有了滑板式底盘,可以为上部车舱的开发提供更多的可能。如上图,当然我们看滑板底盘,不要上来就被「噢,就是非承载车身啊」的第一印象框住。当年没有电动车,所以没有几百公斤的电池包,没有能取消转向柱的线传转向系统,没有线传制动系

身高1.65米,体重55公斤,全身44个自由度,能够快速行走、敏捷避障、稳健上下坡、抗冲击干扰的人形机器人,现在可以带回家了!傅利叶智能的通用人形机器人GR-1已开启预售机器人大讲堂傅利叶智能FourierGR-1通用人形机器人现已开放预售。GR-1拥有高度仿生的躯干构型和拟人化的运动控制,全身44个自由度,具备行走、避障、越障、上下坡、抗干扰、适应不同路面等运动能力,是通用人工智能的理想载体。官网预售页面:www.fftai.cn/order#FourierGR-1#傅利叶智能需要进行改写的内

定位在自动驾驶中占据着不可替代的地位,而且未来有着可期的发展。目前自动驾驶中的定位都是依赖RTK配合高精地图,这给自动驾驶的落地增加了不少成本与难度。试想一下人类开车,并非需要知道自己的全局高精定位及周围的详细环境,有一条全局导航路径并配合车辆在该路径上的位置,也就足够了,而这里牵涉到的,便是SLAM领域的关键技术。什么是SLAMSLAM (Simultaneous Localization and Mapping),也称为CML (Concurrent Mapping and Localiza
