SIMPL: 自動運転向けのシンプルで効率的なマルチエージェント動作予測ベンチマーク
原題: SIMPL: A Simple and Efficient Multi-agent Motion Prediction Baseline for Autonomous Driving
論文リンク: https://arxiv.org/pdf/2402.02519.pdf
コードリンク: https://github.com/HKUST-Aerial-Robotics/SIMPL
著者の所属: 香港科技大学 DJI
#論文のアイデア:
この論文では、自動運転車向けのシンプルで効率的な動作予測ベースライン (SIMPL) を提案します。従来のエージェント中心の方法 (精度は高いが繰り返しの計算が必要) やシーン中心の方法 (精度と汎用性が損なわれる) とは異なり、SIMPL は関連するすべてのトラフィックに対する包括的なソリューションを提供でき、参加者はリアルタイムで正確な移動予測を提供します。精度と推論速度を向上させるために、この論文では、対称的な方法でダイレクトメッセージパッシングを実行し、ネットワークが単一のフィードフォワードパスですべての道路利用者の将来の動きを予測できるようにする、コンパクトで効率的なグローバル特徴融合モジュールを提案します。視点移動による損失。さらに、この論文では、連続軌道パラメータ化のための軌道デコードにおけるバーンスタイン基底多項式の使用を調査し、任意の時点での状態とその高次導関数の評価を可能にし、下流の計画タスクにとって価値があります。強力なベースラインとして、SIMPL は Argoverse 1 および 2 の動き予測ベンチマークで他の最先端の手法と比較して非常に優れたパフォーマンスを示します。さらに、SIMPL は軽量設計と低い推論遅延により、拡張性が高く、現実世界の航空機への展開に有望です。ネットワーク設計:
周囲の交通参加者の動きを予測することは、自動運転車にとって、特に下流の意思決定および計画モジュールにおいて重要です。意図や軌道を正確に予測することで、安全性と乗り心地が向上します。 学習ベースの動き予測の場合、最も重要なトピックの 1 つはコンテキスト表現です。初期の手法では、通常、周囲の風景をマルチチャンネルの鳥瞰図画像として表現していました [1] ~ [4]。対照的に、最近の研究では、ベクトル化されたシーン表現 [5] ~ [13] の採用が増えています。この表現では、地理座標を含む点セットまたはポリラインを使用して位置とジオメトリに注釈が付けられ、それによって忠実度が向上し、受容野が拡張されます。ただし、ラスター化表現とベクトル化表現の両方について、重要な問題があります。それは、これらすべての要素に対して適切な参照フレームをどのように選択すべきかということです。簡単なアプローチは、自動運転車を中心とした共有座標系 (シーンを中心とした) 内のすべてのインスタンスを記述し、その座標を入力フィーチャとして直接使用することです。これにより、単一のフィードフォワード パスで複数のターゲット エージェントの予測を行うことが可能になります [8、14]。ただし、グローバル座標を入力として使用すると、通常、単一のフィードフォワード パスで複数のターゲット エージェントに対して予測が行われます [8、14]。ただし、グローバル座標を入力として使用すると (広範囲にわたって変化することがよくあります)、タスク固有の複雑さが大幅に悪化し、その結果、ネットワーク パフォーマンスが低下し、新しいシナリオへの適応性が制限されます。精度と堅牢性を向上させるための一般的な解決策は、ターゲット エージェントの現在の状態に従ってシーン コンテキストを正規化することです [5、7、10] ~ [13] (エージェント中心)。これは、正規化プロセスと特徴エンコードをターゲット エージェントごとに繰り返し実行する必要があることを意味し、冗長な計算を犠牲にしてパフォーマンスの向上につながります。したがって、視点の変更に対する堅牢性を維持しながら、複数のオブジェクトの特徴を効果的にエンコードできる方法を検討する必要があります。 意思決定や動作計画などの動作予測の下流モジュールでは、将来の位置を考慮するだけでなく、機首方位、速度、その他の高次導関数も考慮する必要があります。たとえば、周囲の車両の予測される方位は、将来の時空占有を形成する上で重要な役割を果たし、これは安全で堅牢な動作計画を確保するための重要な要素です [15、16]。さらに、物理的制約に従わずに高次の量を独立して予測すると、一貫性のない予測結果が生じる可能性があります [17、18]。たとえば、速度がゼロであっても、計画モジュールを混乱させる位置ずれが生じる可能性があります。 この記事では、自動運転システムにおけるマルチエージェント軌道予測の重要な問題を解決するための SIMPL (Simple and Efficient Motion Prediction Baseline) と呼ばれる手法を紹介します。この方法では、まずインスタンス中心のシーン表現を採用し、次に対称融合トランスフォーマー (SFT) テクノロジーを導入します。これにより、視点不変性に対する精度と堅牢性を維持しながら、単一のフィードフォワード パスですべてのエージェントの軌道を効果的に予測できます。対称コンテキスト融合に基づく他の方法と比較して、SFT はよりシンプルで軽量で実装が容易であるため、車両環境への導入に適しています。 第 2 に、この論文では、バーンスタイン基底多項式 (ベジェ曲線としても知られる) に基づく予測軌道の新しいパラメーター化方法を紹介します。この連続表現により滑らかさが保証され、任意の時点での正確な状態とその高次導関数の簡単な評価が可能になります。この論文の実証研究は、ベジェ曲線の制御点を予測する学習の方が、単項基底多項式の係数を推定するより効率的で数値的に安定していることを示しています。最後に、提案されたコンポーネントはシンプルで効率的なモデルにうまく統合されています。この論文では、提案された方法を 2 つの大規模な動き予測データセット [22、23] で評価し、実験結果は、簡素化された設計にもかかわらず、SIMPL が他の最先端の方法と依然として高い競争力を持っていることを示しています。さらに重要なのは、SIMPL により、量子化パフォーマンスを犠牲にすることなく、より少ない学習可能なパラメータとより低い推論遅延で効率的なマルチエージェント軌道予測が可能になり、これは現実世界の航空機配備に有望です。このホワイト ペーパーでは、強力なベースラインとして、SIMPL が拡張性が高いことも強調しています。シンプルなアーキテクチャにより、最新の動き予測との直接統合が容易になり、全体的なパフォーマンスをさらに向上させる機会が提供されます。
図 1: 複雑な運転シナリオにおけるマルチエージェントの動作予測の図。私たちのアプローチは、すべての関連エージェントに対して合理的な仮説をリアルタイムで同時に生成することができます。自車は赤、他車は青で表示されます。グラデーションカラーを使用して、タイムスタンプに基づいて予測された軌跡を視覚化します。その他の例については、添付のビデオを参照してください。
図 2: SIMPL の回路図。この記事では、可能な限り単純なネットワーク アーキテクチャを使用して、その有効性を示します。セマンティック インスタンスのローカルな特徴は単純なエンコーダーによって処理されますが、インスタンス間の特徴は相対位置の埋め込みに保存されます。マルチモーダル軌道予測結果は、提案された対称機能 Transformer の後のモーション デコーダーによって生成されます。
図 3: 相対姿勢計算の概略図。
図 4: 提案された L 層対称融合変圧器 (SFT) の図。インスタンス トークンと相対位置埋め込み (RPE) は、各 SFT レイヤーで周期的に更新されます。
図 5: 2D 敗血症ベジェ曲線 (左)。 #########実験結果: ##################################### #
以上がSIMPL: 自動運転向けのシンプルで効率的なマルチエージェント動作予測ベンチマークの詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。

ホットAIツール

Undresser.AI Undress
リアルなヌード写真を作成する AI 搭載アプリ

AI Clothes Remover
写真から衣服を削除するオンライン AI ツール。

Undress AI Tool
脱衣画像を無料で

Clothoff.io
AI衣類リムーバー

AI Hentai Generator
AIヘンタイを無料で生成します。

人気の記事

ホットツール

メモ帳++7.3.1
使いやすく無料のコードエディター

SublimeText3 中国語版
中国語版、とても使いやすい

ゼンドスタジオ 13.0.1
強力な PHP 統合開発環境

ドリームウィーバー CS6
ビジュアル Web 開発ツール

SublimeText3 Mac版
神レベルのコード編集ソフト(SublimeText3)

ホットトピック











上記と著者の個人的な理解 3 次元ガウシアンプラッティング (3DGS) は、近年、明示的な放射線フィールドとコンピューター グラフィックスの分野で出現した革新的なテクノロジーです。この革新的な方法は、数百万の 3D ガウスを使用することを特徴とし、主に暗黙的な座標ベースのモデルを使用して空間座標をピクセル値にマッピングする神経放射線場 (NeRF) 方法とは大きく異なります。明示的なシーン表現と微分可能なレンダリング アルゴリズムにより、3DGS はリアルタイム レンダリング機能を保証するだけでなく、前例のないレベルの制御とシーン編集も導入します。これにより、3DGS は、次世代の 3D 再構築と表現にとって大きな変革をもたらす可能性のあるものとして位置付けられます。この目的を達成するために、私たちは 3DGS 分野における最新の開発と懸念について初めて体系的な概要を提供します。

昨日の面接で、ロングテール関連の質問をしたかと聞かれたので、簡単にまとめてみようと思いました。自動運転のロングテール問題とは、自動運転車におけるエッジケース、つまり発生確率が低い考えられるシナリオを指します。認識されているロングテール問題は、現在、単一車両のインテリジェント自動運転車の運用設計領域を制限している主な理由の 1 つです。自動運転の基礎となるアーキテクチャとほとんどの技術的問題は解決されており、残りの 5% のロングテール問題が徐々に自動運転の開発を制限する鍵となってきています。これらの問題には、さまざまな断片的なシナリオ、極端な状況、予測不可能な人間の行動が含まれます。自動運転におけるエッジ シナリオの「ロング テール」とは、自動運転車 (AV) におけるエッジ ケースを指します。エッジ ケースは、発生確率が低い可能性のあるシナリオです。これらの珍しい出来事

0.前面に書かれています&& 自動運転システムは、さまざまなセンサー (カメラ、ライダー、レーダーなど) を使用して周囲の環境を認識し、アルゴリズムとモデルを使用することにより、高度な知覚、意思決定、および制御テクノロジーに依存しているという個人的な理解リアルタイムの分析と意思決定に。これにより、車両は道路標識の認識、他の車両の検出と追跡、歩行者の行動の予測などを行うことで、安全な運行と複雑な交通環境への適応が可能となり、現在広く注目を集めており、将来の交通分野における重要な開発分野と考えられています。 。 1つ。しかし、自動運転を難しくしているのは、周囲で何が起こっているかを車に理解させる方法を見つけることです。これには、自動運転システムの 3 次元物体検出アルゴリズムが、周囲環境にある物体 (位置を含む) を正確に認識し、記述することができる必要があります。

自動運転では軌道予測が重要な役割を果たしており、自動運転軌道予測とは、車両の走行過程におけるさまざまなデータを分析し、将来の車両の走行軌跡を予測することを指します。自動運転のコアモジュールとして、軌道予測の品質は下流の計画制御にとって非常に重要です。軌道予測タスクには豊富な技術スタックがあり、自動運転の動的/静的知覚、高精度地図、車線境界線、ニューラル ネットワーク アーキテクチャ (CNN&GNN&Transformer) スキルなどに精通している必要があります。始めるのは非常に困難です。多くのファンは、できるだけ早く軌道予測を始めて、落とし穴を避けたいと考えています。今日は、軌道予測に関するよくある問題と入門的な学習方法を取り上げます。関連知識の紹介 1. プレビュー用紙は整っていますか? A: まずアンケートを見てください。

元のコンテンツの意味を変更したり、コンテンツを微調整したり、コンテンツを書き直したり、継続したりしないでください。 「分位回帰はこのニーズを満たし、定量化された確率で予測間隔を提供します。これは、特に応答変数の条件付き分布が重要な場合に、予測変数と応答変数の間の関係をモデル化するために使用される統計手法です。従来の回帰とは異なります」図 (A): 分位回帰 分位回帰の概念は推定です。一連の回帰子 X と変数の間の線形関係をモデル化する方法です。被説明変数 Y の分位数。既存の回帰モデルは、実際には被説明変数と説明変数の関係を調べる手法です。説明変数と被説明変数の関係に焦点を当てます。

原題: SIMPL: ASimpleandEfficientMulti-agentMotionPredictionBaselineforAutonomousDriving 論文リンク: https://arxiv.org/pdf/2402.02519.pdf コードリンク: https://github.com/HKUST-Aerial-Robotics/SIMPL 著者単位: 香港科学大学DJI 論文のアイデア: この論文は、自動運転車向けのシンプルで効率的な動作予測ベースライン (SIMPL) を提案しています。従来のエージェントセントとの比較

先頭と開始点に書かれている エンドツーエンドのパラダイムでは、統一されたフレームワークを使用して自動運転システムのマルチタスクを実現します。このパラダイムの単純さと明確さにも関わらず、サブタスクにおけるエンドツーエンドの自動運転手法のパフォーマンスは、依然としてシングルタスク手法に比べてはるかに遅れています。同時に、以前のエンドツーエンド手法で広く使用されていた高密度鳥瞰図 (BEV) 機能により、より多くのモダリティやタスクに拡張することが困難になります。ここでは、スパース検索中心のエンドツーエンド自動運転パラダイム (SparseAD) が提案されています。このパラダイムでは、スパース検索は、高密度の BEV 表現を使用せずに、空間、時間、タスクを含む運転シナリオ全体を完全に表します。具体的には、統合されたスパース アーキテクチャが、検出、追跡、オンライン マッピングなどのタスク認識のために設計されています。さらに、重い

この 1 か月間、いくつかのよく知られた理由により、私は業界のさまざまな教師やクラスメートと非常に集中的な交流をしてきました。この交換で避けられない話題は当然、エンドツーエンドと人気の Tesla FSDV12 です。この機会に、現時点での私の考えや意見を整理し、皆様のご参考とご議論に役立てたいと思います。エンドツーエンドの自動運転システムをどのように定義するか、またエンドツーエンドで解決することが期待される問題は何でしょうか?最も伝統的な定義によれば、エンドツーエンド システムとは、センサーから生の情報を入力し、関心のある変数をタスクに直接出力するシステムを指します。たとえば、画像認識では、従来の特徴抽出 + 分類子方式と比較して、CNN はエンドツーエンドと言えます。自動運転タスクでは、各種センサー(カメラ/LiDAR)からのデータを入力
