一文讀懂智慧汽車駕駛監控系統
駕駛監控系統,縮寫DMS,是英文Driver Monitor System的縮寫,即駕駛監控系統。主要是實現駕駛員的識別、駕駛員疲勞駕駛以及危險行為的偵測功能。
#FordDMS系統
01 法規加持,DMS進入發展快車道
在現階段開始量產的L2-L3級自動駕駛中,其實都只有在特定條件下才可以實行,很多狀況下需要駕駛員能及時接管車輛進行處置。因此,在駕駛員太信任自動駕駛而放棄或減弱對駕駛過程的控制時可能會導致某些事故的發生。而DMS-駕駛員監控系統的引進可以有效減輕這個問題的出現。
#因此,近年來各國的政策法規等多方面開始推進DMS的上車:歐盟和中國均出台法律法規。國內已率先對「兩客一危」等商用車車型安裝DMS系統作出強制要求,乘用車搭載要求也在推進制定中。而歐盟則將DMS納入Euro NCAP五星安全評級的關鍵要素,而且是必要條件。幾乎是從2020年開始,DMS系統的裝車率快速提升,產業進入發展快車道。
21年7月由工信部、公共安全部和運輸部聯合印發的《智能網聯汽車道路測試與示範應用管理規範(試行)》強調要求智慧網路連線汽車要具備線上監控功能,可以反映駕駛人與人機互動狀態的車內視訊及語音監控狀況。
02 視覺方案-DMS技術方案簡介
#DMS的核心功能主要是疲勞監測、分心監測、危險行為監測。早期的DMS方案主要透過非生物特徵的技術來實現,例如透過方向盤及轉向感測器,監測任何不穩定的方向盤運動、車道偏離或無故改變速度等。但由於系統複雜,非直覺感知,整體的搭載率一直很低。
##################### 早期的DMS由於非直覺感知,可能會誤導系統判斷。來源,知乎康斯坦丁.DC###############現階段的DMS則大多是基於攝像頭的面部識別和眼球跟踪技術,通過紅外光等採集駕駛員面部信息再經過演算法分析出人員當下的身體狀態,在偵測到駕駛者處於不安全狀態時,再透過閃爍紅光或是方向盤震動等方案對駕駛者進行提醒。整個系統的硬體部分由攝影機 整合座艙車機/網域控制器解決方案組成;軟體部分則主要涉及AI視覺演算法。 ##############################圖片來源 Eyesight################# #2D/3D的相機配置###############目前大部分用於偵測駕駛員疲勞的駕駛監控系統均採用成本較低的傳統2D可見光攝影機(配合IR紅外線LED)。 #######水晶光電DMS相機簡介
理想L9的DMS系統
#2022年,理想L9搭載了Melexis的3D-ToF感測器,並將之應用DMS系統。這種採用近紅外光的3D光學感測技術可以建造駕駛員頭部“深度圖”,透過“深度圖”可以精準的分析駕駛員的獨特面部特徵,性能遠超2D技術。除了Melexis外,NXP、艾邁斯歐司朗等也都有類似的技術方案佈局。
相機的整合
#這一攝影機主要安裝在正對駕駛者的位置,包括車內後視鏡/行車記錄儀,方向盤、儀表中控螢幕以及A柱等。考慮到整體內裝的美觀性,攝影機的整合也成為一個備受關注的議題。
#麥格納將相機整合在後視鏡中
天馬發布可整合DMS相機的挖洞螢幕
##DMS系統的功能拓展
駕駛監控系統的基礎功能是疲勞監測、分心監測、危險行為監測。但隨著2D/3D攝影機的引進以及人臉辨識演算法的發展,DMS系統也在融合ADAS等自動駕駛技術的發展,催生了一些創新人機互動HMI智慧化的場景應用,提升高階自動駕駛/智慧網聯汽車時代的駕乘體驗。
#大陸集團DMS系統,來源大陸官網
作為創新人機互動的傳感器,這些DMS功能的拓展功能主要是獲取駕駛員信息,從而進一步完善未來汽車座艙中的新應用,並實現客製化體驗:
1、臉部身分識別
當使用者靠近感測器時,無需動作配合,即可快速完成活體判斷並進行識別,主動為使用者打開車門,調整座椅位置,并快速登陸車機系統,保障座艙系統高效運作。
臉部辨識的引入,不僅提升了駕駛的舒適體驗,更可以提高車輛使用安全,比如說防盜功能。
###2、眼球追蹤#########利用攝影機進行視野追蹤、頭部姿態追蹤技術,辨識出駕駛人注視的區域(主駕擋風玻璃、副駕擋風玻璃、左後視鏡…)。這項功能可與目前熱門的HUD抬頭顯示系統聯動,可即時調整並為駕駛提供更合適的顯示畫面。
3、手勢辨識
手勢識別,基於視覺手勢辨識技術,與車機系統相連,提供新的結合方式,透過車載攝影機完成全部功能。如做了對應手勢之後,主機會進行歌曲切換或靜音等操作,具體定義由各主機廠自行定義。
手勢互動方案屬於在傳統觸控控制方案之外的新互動方案,在寶馬上已經應用多年。這個相機與DMS系統也可以產生一定連結。
4、表情識別,情緒感應
#透過創新AI演算法,辨識出駕駛員當下的情緒,可連動氣氛燈、香氛系統。這種應用豐田在CES 2019上有展示。
Toyota紡織的AceS概念
##5、娛樂互動自動駕駛技術研發商MINIEYE在其I-CS座艙感知量產方案中創新地打通了前後排的互動空間,透過視線、手勢、頭部動作等多種自然身體語言的互動方式,可實現多人多位置便利互動。
##### #6、座艙乘員偵測OMS###############將專門對應駕駛者的攝影機拓展到整個座艙內部,可以進一步提升整體車內的安全性。 ###########################透過位於車頂的攝像頭,並結合毫米波雷達的感知數據,系統可以綜合分析人臉屬性、人體骨骼比例以及身長訊息,能夠準確判斷成人與兒童。當識別到兒童,系統將主動觸發兒童看護功能,持續對兒童進行狀態、行為監測,並即時回饋給前排家長,提醒其採取必要措施。 ######
以上是一文讀懂智慧汽車駕駛監控系統的詳細內容。更多資訊請關注PHP中文網其他相關文章!

熱AI工具

Undresser.AI Undress
人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover
用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool
免費脫衣圖片

Clothoff.io
AI脫衣器

Video Face Swap
使用我們完全免費的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱門文章

熱工具

記事本++7.3.1
好用且免費的程式碼編輯器

SublimeText3漢化版
中文版,非常好用

禪工作室 13.0.1
強大的PHP整合開發環境

Dreamweaver CS6
視覺化網頁開發工具

SublimeText3 Mac版
神級程式碼編輯軟體(SublimeText3)

智慧型應用程式控制是Windows11中非常有用的工具,可幫助保護你的電腦免受可能損害資料的未經授權的應用程式(如勒索軟體或間諜軟體)的侵害。本文將解釋什麼是智慧型應用程式控制、它是如何運作的,以及如何在Windows11中開啟或關閉它。什麼是Windows11中的智慧型應用控制?智慧型應用程式控制(SAC)是Windows1122H2更新中引入的新安全功能。它與MicrosoftDefender或第三方防毒軟體一起運行,以阻止可能不必要的應用,這些應用程式可能會減慢設備速度、顯示意外廣告或執行其他意外操作。智慧應用

好強大的AI模仿能力,真的防不住,完全防不住。現在AI的發展已經達到這種程度了嗎?你前腳讓自己的五官亂飛,後腳,一模一樣的表情就被復現出來,瞪眼、挑眉、噘嘴,不管多麼誇張的表情,都模仿的非常到位。加大難度,讓眉毛挑的再高些,眼睛睜的再大些,甚至連嘴型都是歪的,虛擬人物頭像也能完美復現表情。當你在左邊調整參數時,右邊的虛擬頭像也會相應地改變動作給嘴巴、眼睛一個特寫,模仿的不能說完全相同,只能說表情一模一樣(最右邊)。這項研究來自慕尼黑工業大學等機構,他們提出了GaussianAvatars,這種

本文經自動駕駛之心公眾號授權轉載,轉載請洽出處。原標題:MotionLM:Multi-AgentMotionForecastingasLanguageModeling論文連結:https://arxiv.org/pdf/2309.16534.pdf作者單位:Waymo會議:ICCV2023論文想法:對於自動駕駛車輛安全規劃來說,可靠地預測道路代理未來行為是至關重要的。本研究將連續軌跡表示為離散運動令牌序列,並將多智能體運動預測視為語言建模任務。我們提出的模型MotionLM有以下幾個優點:首

軌跡預測近兩年風頭正猛,但大都聚焦於車輛軌跡預測方向,自動駕駛之心今天就為大家分享頂會NeurIPS上關於行人軌跡預測的演算法—SHENet,在受限場景中人類的移動模式通常在一定程度上符合有限的規律。基於這個假設,SHENet透過學習隱含的場景規律來預測一個人的未來軌跡。文章已經授權自動駕駛之心原創!作者的個人理解由於人類運動的隨機性和主觀性,目前預測一個人的未來軌跡仍然是一個具有挑戰性的問題。然而,由於場景限制(例如平面圖、道路和障礙物)以及人與人或人與物體的互動性,在受限場景中人類的移動模式通

《ComputerWorld》雜誌曾經寫過一篇文章,說“編程到1960年就會消失”,因為IBM開發了一種新語言FORTRAN,這種新語言可以讓工程師寫出他們所需的數學公式,然後提交給電腦運行,所以程式設計就會終結。圖片又過了幾年,我們聽到了一種新說法:任何業務人員都可以使用業務術語來描述自己的問題,告訴電腦要做什麼,使用這種叫做COBOL的程式語言,公司不再需要程式設計師了。後來,據說IBM開發了一門名為RPG的新程式語言,可以讓員工填寫表格並產生報告,因此大部分企業的程式設計需求都可以透過它來完成圖

身高1.65米,體重55公斤,全身44個自由度,能夠快速行走、敏捷避障、穩健上下坡、抗衝擊幹擾的人形機器人,現在可以帶回家了!傅利葉智慧的通用人形機器人GR-1已開啟預售機器人大講堂傅利葉智慧FourierGR-1通用人形機器人現已開放預售。 GR-1擁有高度仿生的軀幹構型和擬人化的運動控制,全身44個自由度,具備行走、避障、越障、上下坡、抗干擾、適應不同路面等運動能力,是通用人工智慧的理想載體。官網預售頁:www.fftai.cn/order#FourierGR-1#傅利葉智能需要改寫的內

定位在自動駕駛中佔據不可取代的地位,而且未來有著可期的發展。目前自動駕駛中的定位都是依賴RTK配合高精地圖,這為自動駕駛的落地增加了不少成本與難度。試想一下人類開車,並非需要知道自己的全局高精定位及周圍的詳細環境,有一條全局導航路徑並配合車輛在該路徑上的位置,也就足夠了,而這裡牽涉到的,便是SLAM領域的關鍵技術。什麼是SLAMSLAM (Simultaneous Localization and Mapping),也稱為CML (Concurrent Mapping and Localiza

01什麼是滑板底盤所謂滑板式底盤,即將電池、電動傳動系統、懸吊、煞車等零件提前整合在底盤上,實現車身和底盤的分離,設計解耦。基於這類平台,車企可以大幅降低前期研發和測試成本,同時快速回應市場需求打造不同的車款。尤其是無人駕駛時代,車內的佈局不再是以駕駛為中心,而是會注重空間屬性,有了滑板式底盤,可以為上部車艙的開發提供更多的可能。如上圖,當然我們看滑板底盤,不要上來就被「噢,就是非承載車身啊」的第一印象框住。當年沒有電動車,所以沒有幾百公斤的電池包,沒有能取消轉向柱的線傳轉向系統,沒有線傳煞車系
