地平線發布開源的Sparse4D演算法,推動向端到端自動駕駛邁進一步
1月22日,地平線將純視覺自動駕駛演算法-Sparse4D系列演算法開源,推動產業更多開發者共同參與到端到端自動駕駛、稀疏感知等前沿技術方向的探索中。 目前,Sparse4D演算法已在GitHub平台上線,開發者可關注地平線GitHub官方帳號「Horizon Robotics」取得原始碼。
Sparse4D是邁向長時序稀疏化3D目標偵測的系列演算法,屬於時序多視角融合感知技術的範疇。面向稀疏化感知的產業發展趨勢,Sparse4D建構了純稀疏的融合感知框架,讓感知演算法效率更高、精確度更高,讓感知系統更簡潔。 相比稠密BEV演算法,Sparse4D降低了計算複雜度,打破了算力對感知範圍的限制,在感知效果和推理速度上,都實現了對稠密BEV演算法的超越。在nuScenes純視覺3D檢測和3D追蹤兩個榜單上,Sparse4D均位列第一,成為SOTA,領先於包括SOLOFusion、BEVFormer v2和StreamPETR在內的一眾最新方法。
Sparse4D演算法架構
#經過三版迭代,地平線Sparse4D團隊成功地攻克了提升稀疏演算法效能、降低時序融合計算複雜度和實現端到端目標追蹤等技術難題。最近,他們發表了題為《Sparse4D v3: Advancing End-to-End 3D Detection and Tracking》的論文,詳細介紹了他們的研究成果。透過利用地平線業務資料進行效能驗證,Sparse4D團隊已成功在地平線征程5計算方案上進行了部署。未來,根據規劃,Sparse4D技術將應用於地平線下一代產品。這項成果的取得將進一步推動地平線的發展。
地平線副總裁兼軟體平台產品線總裁餘軼事南博士指出,當前的行業已經進入了感知端到端的時代,只需一個網路即可完成整個知覺任務。他認為,Sparse4D系列演算法將稀疏類別演算法的效能提升到了一個新的高度,並成功實現了端到端的多目標追蹤。這對於稀疏感知和端對端自動駕駛來說都具有重要意義,可以說是一個里程碑式的突破。地平線公司選擇將Sparse4D開源給整個產業,希望能與業界的優秀開發者共同進步。
傳統感知系統與端對端感知系統的比較
地平線積極參與智慧駕駛開源軟體生態建構的另一個範例是開源Sparse4D系列演算法。這項演算法在純視覺、端到端自動駕駛的落地過程中具有巨大的應用潛力。此外,地平線也開源了VAD演算法和MapTR演算法等領先技術,這些技術將進一步推動產業的發展。預計Sparse4D演算法將受到行業開發者的廣泛關注和使用。地平線的持續努力將加速產業的發展進程。
地平線秉持著將自主創新的技術、突破性產品與解決方案轉化為智慧汽車產業生態合作夥伴商業價值的概念,為產業的發展注入活力。透過與產業各方緊密協同、開放融合、合作創新,地平線致力於成為智慧汽車產業生態的源頭活水,為其提供持續的發展動力。地平線深知自動駕駛的量產是一項重要的突破,因此我們將繼續擁抱開源開放,加速前沿技術的落地和量產化。我們堅信與產業共贏的未來將會更加廣闊,地平線將持續努力,為智慧汽車產業的繁榮做出貢獻。
以上是地平線發布開源的Sparse4D演算法,推動向端到端自動駕駛邁進一步的詳細內容。更多資訊請關注PHP中文網其他相關文章!

熱AI工具

Undresser.AI Undress
人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover
用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool
免費脫衣圖片

Clothoff.io
AI脫衣器

Video Face Swap
使用我們完全免費的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱門文章

熱工具

記事本++7.3.1
好用且免費的程式碼編輯器

SublimeText3漢化版
中文版,非常好用

禪工作室 13.0.1
強大的PHP整合開發環境

Dreamweaver CS6
視覺化網頁開發工具

SublimeText3 Mac版
神級程式碼編輯軟體(SublimeText3)

寫在前面&筆者的個人理解三維Gaussiansplatting(3DGS)是近年來在顯式輻射場和電腦圖形學領域出現的一種變革性技術。這種創新方法的特點是使用了數百萬個3D高斯,這與神經輻射場(NeRF)方法有很大的不同,後者主要使用隱式的基於座標的模型將空間座標映射到像素值。 3DGS憑藉其明確的場景表示和可微分的渲染演算法,不僅保證了即時渲染能力,而且引入了前所未有的控制和場景編輯水平。這將3DGS定位為下一代3D重建和表示的潛在遊戲規則改變者。為此我們首次系統性地概述了3DGS領域的最新發展與關

昨天面試被問到了是否做過長尾相關的問題,所以就想著簡單總結一下。自動駕駛長尾問題是指自動駕駛汽車中的邊緣情況,即發生機率較低的可能場景。感知的長尾問題是目前限制單車智慧自動駕駛車輛運行設計域的主要原因之一。自動駕駛的底層架構和大部分技術問題已經解決,剩下的5%的長尾問題,逐漸成了限制自動駕駛發展的關鍵。這些問題包括各種零碎的場景、極端的情況和無法預測的人類行為。自動駕駛中的邊緣場景"長尾"是指自動駕駛汽車(AV)中的邊緣情況,邊緣情況是發生機率較低的可能場景。這些罕見的事件

0.寫在前面&&個人理解自動駕駛系統依賴先進的感知、決策和控制技術,透過使用各種感測器(如相機、光達、雷達等)來感知周圍環境,並利用演算法和模型進行即時分析和決策。這使得車輛能夠識別道路標誌、檢測和追蹤其他車輛、預測行人行為等,從而安全地操作和適應複雜的交通環境。這項技術目前引起了廣泛的關注,並認為是未來交通領域的重要發展領域之一。但是,讓自動駕駛變得困難的是弄清楚如何讓汽車了解周圍發生的事情。這需要自動駕駛系統中的三維物體偵測演算法可以準確地感知和描述周圍環境中的物體,包括它們的位置、

一先導與重點文章主要介紹自動駕駛技術中幾種常用的座標系統,以及他們之間如何完成關聯與轉換,最終建構出統一的環境模型。這裡重點理解自車到相機剛體轉換(外參),相機到影像轉換(內參),影像到像素有單位轉換。 3d向2d轉換會有對應的畸變,平移等。重點:自車座標系相機機體座標系需要被重寫的是:平面座標系像素座標系難點:要考慮影像畸變,去畸變和加畸變都是在像平面上去補償二簡介視覺系統一共有四個座標系:像素平面座標系(u,v)、影像座標系(x,y)、相機座標系()與世界座標系()。每種座標系之間均有聯繫,

軌跡預測在自動駕駛中承擔著重要的角色,自動駕駛軌跡預測是指透過分析車輛行駛過程中的各種數據,預測車輛未來的行駛軌跡。作為自動駕駛的核心模組,軌跡預測的品質對於下游的規劃控制至關重要。軌跡預測任務技術堆疊豐富,需熟悉自動駕駛動/靜態感知、高精地圖、車道線、神經網路架構(CNN&GNN&Transformer)技能等,入門難度很高!許多粉絲期望能夠盡快上手軌跡預測,少踩坑,今天就為大家盤點下軌跡預測常見的一些問題和入門學習方法!入門相關知識1.預習的論文有沒有切入順序? A:先看survey,p

原文標題:SIMPL:ASimpleandEfficientMulti-agentMotionPredictionBaselineforAutonomousDriving論文連結:https://arxiv.org/pdf/2402.02519.pdf程式碼連結:https://github.com/HKUST-Aerial-Robotics/SIMPLobotics單位論文想法:本文提出了一種用於自動駕駛車輛的簡單且有效率的運動預測基線(SIMPL)。與傳統的以代理為中心(agent-cent

最近一個月由於眾所周知的一些原因,非常密集地和業界的各種老師同學進行了交流。交流中必不可免的一個話題自然是端到端與火辣的特斯拉FSDV12。想藉此機會,整理當下這個時刻的一些想法和觀點,供大家參考和討論。如何定義端到端的自動駕駛系統,應該期望端到端解決什麼問題?依照最傳統的定義,端到端的系統指的是一套系統,輸入感測器的原始訊息,直接輸出任務關心的變數。例如,在影像辨識中,CNN相對於傳統的特徵提取器+分類器的方法就可以稱之為端到端。在自動駕駛任務中,輸入各種感測器的資料(相機/LiDAR

目標偵測在自動駕駛系統當中是一個比較成熟的問題,其中行人偵測是最早得以部署演算法之一。在多數論文當中已經進行了非常全面的研究。然而,利用魚眼相機進行環視的距離感知相對來說研究較少。由於徑向畸變大,標準的邊界框表示在魚眼相機當中很難實施。為了緩解上述描述,我們探索了擴展邊界框、橢圓、通用多邊形設計為極座標/角度表示,並定義一個實例分割mIOU度量來分析這些表示。所提出的具有多邊形形狀的模型fisheyeDetNet優於其他模型,並同時在用於自動駕駛的Valeo魚眼相機資料集上實現了49.5%的mAP
