目次
エッジ コンピューティング リファレンス アーキテクチャ
エッジ コンピューティングのハードウェア インフラストラクチャ
1. エッジ サーバー
2. エッジ アクセス ネットワーク
3. エッジ内部ネットワーク
4. エッジ コンピューティング相互接続ネットワーク
エッジコンピューティングと自動運転システムをどのように組み合わせるか
1.「負荷の統合」
2. 「ヘテロジニアス コンピューティング」
3. 「リアルタイム処理」
4. 「接続性と相互運用性」
5. 「セキュリティの最適化」
概要
ホームページ テクノロジー周辺機器 AI 自動運転システムにおけるエッジコンピューティング技術

自動運転システムにおけるエッジコンピューティング技術

Apr 12, 2023 pm 12:10 PM
テクノロジー オートパイロット エッジコンピューティング

エッジ コンピューティングは、ネットワークのエッジで計算を実行する新しいコンピューティング モデルであり、そのデータ処理は主に 2 つの部分で構成され、1 つはダウンリンクのクラウド サービス、もう 1 つはアップリンクの Internet of Everything サービスです。 「エッジ」は実際には相対的な概念であり、データからクラウド コンピューティング センターまでのパス上にあるコンピューティング、ストレージ、およびネットワーク関連のリソースを指します。データの一端からクラウド サービス センターの他端まで、アプリケーションの特定のニーズと実際のアプリケーション シナリオに基づいて、エッジはこのパス上の 1 つ以上のリソース ノードとして表すことができます。エッジコンピューティングのビジネスの本質は、クラウドコンピューティングの集約ノードをデータセンター外に拡張・進化させることであり、主にエッジクラウド、エッジネットワーク、エッジゲートウェイの3種類の実装形態で構成されます。

自動運転システムにおけるエッジコンピューティング技術


#上の図に示すように、これは現在自動運転に使用されている産業用コンピューターを表しています。実際、これは耐久性が強化されたパーソナル コンピューターです。産業用コントローラーとして産業環境で確実に動作します。EIA 規格に準拠した全鋼製産業用シャーシを使用して電磁干渉耐性を強化し、バス構造とモジュラー設計技術を使用して単一障害点を防止します。 。上記の自動運転産業用コンピュータネットワークの設計計画は、ISO26262の要件を十分に考慮しています。このうち、CPU、GPU、FPGA、バスはすべて冗長設計になっています。 IPC システム全体に障害が発生した場合、冗長 MCU 制御によりコンピューティングのセキュリティが確保され、車両の CAN バスに命令を直接送信して車両の駐車を制御できます。現時点では、この集中型アーキテクチャは、次世代の集中型自動運転システム ソリューションに適しています。産業用コンピュータは、次世代の集中型ドメイン コントローラに相当します。すべてのコンピューティング作業は 1 つに統合され、アルゴリズムの反復に過度の考慮は必要ありません。ハードウェア全体のアップグレードと車両規制の要件。

エッジ コンピューティングとエッジ クラウド

現在の自動運転では、大規模な人工知能アルゴリズム モデルと大規模なデータ集中分析がクラウド上で実行されます。クラウドには大量のコンピューティング リソースがあり、非常に短時間でデータ処理を完了できますが、自動運転車向けのサービスをクラウドだけに依存して提供することは多くの場合実現不可能だからです。自動運転車では走行中にリアルタイム処理が必要な大量のデータが生成されるため、これらのデータをコアネットワークを介してリモートクラウドに送信して処理すると、データ送信だけでは大幅な遅延が発生し、要件を満たすことができなくなります。データ処理要件、リアルタイム要件。コア ネットワークの帯域幅も、大量のデータを同時にクラウドに送信する多数の自動運転車をサポートするのが困難であり、さらに、コア ネットワークが混雑してデータ送信が不安定になると、運転が中断されます。自動運転車の安全性は保証できません。

エッジ コンピューティングはローカル サービスに焦点を当てており、高いリアルタイム要件があり、大きなネットワーク圧力にさらされており、コンピューティング手法はローカリゼーションを重視しています。エッジ コンピューティングは、統合アルゴリズム モデルに基づくローカルの小規模インテリジェント分析と前処理に適しています。エッジコンピューティングを自動運転の分野に適用することは、環境データの取得と処理において自動運転車が直面する問題の解決に役立ちます。

自動運転システムにおけるエッジコンピューティング技術

業界のデジタル変革にとって重要な 2 つのコンピューティング手法として、エッジ コンピューティングとクラウド コンピューティングは基本的に同時に共存し、相互に補完し、相互の連携を促進します。ビッグデータ時代のコンピューティングの問題を解決します。

エッジ コンピューティングとは、ネットワークのエッジで計算を実行するコンピューティング モデルを指します。その演算対象は、クラウド サービスからのダウンリンク データと、Internet of Everything サービスからのアップリンク データです。エッジ コンピューティングの「エッジ」とは、ソースとクラウド コンピューティング センターへのパスの間のあらゆるコンピューティングおよびネットワーク リソースからのデータ。つまり、エッジ コンピューティングは、ユーザーの近くのエッジ ノードにサーバーを展開して、ネットワークのエッジ (ワイヤレス アクセス ポイントなど) のユーザーにサービスを提供することで、長距離のデータ送信を回避し、ユーザーに迅速な応答を提供します。タスクオフロード技術は、自動運転車のコンピューティングタスクを他のエッジノードにオフロードして実行し、自動運転車のコンピューティングリソース不足の問題を解決します。

エッジ コンピューティングには、近接性、低遅延、局所性、位置認識という特徴があります。このうち、近接とは、エッジ コンピューティングが情報ソースに近いことを意味します。データの最適化を通じてビッグ データの重要な情報を取得して分析するのに適しています。デバイスに直接アクセスし、エッジ インテリジェンスをより効率的に提供し、特定のアプリケーション シナリオを簡単に導き出すことができます。 。低遅延とは、エッジ コンピューティング サービスがデータを生成する端末デバイスに近いことを意味し、クラウド コンピューティングと比較して、特にスマート ドライビング アプリケーション シナリオにおいて遅延が大幅に短縮され、フィードバック プロセスが高速化されます。ローカリティとは、エッジ コンピューティングがネットワークの残りの部分から独立して実行され、ローカライズされた比較的独立したコンピューティングを実現できることを意味します。一方では、ローカル データのセキュリティが確保され、他方では、コンピューティングのネットワーク品質への依存が軽減されます。位置認識とは、エッジ ネットワークがワイヤレス ネットワークの一部である場合、エッジ コンピューティング スタイルのローカル サービスは、接続されているすべてのデバイスの位置を特定するために比較的少ない情報を使用できることを意味します。これらのサービスは、位置ベースのサービス アプリケーション シナリオに適用できます。

同時に、エッジ コンピューティングの開発トレンドは、ヘテロジニアス コンピューティング、エッジ インテリジェンス、エッジとクラウドのコラボレーション、5G エッジ コンピューティングへと徐々に進化していきます。ヘテロジニアス コンピューティングでは、さまざまな種類の命令セットとアーキテクチャのコンピューティング ユニットを使用して、多様なコンピューティングのエッジ サービスのニーズを満たすコンピューティング システムを形成する必要があります。ヘテロジニアス コンピューティングは、新世代の「コネクテッド コンピューティング」のインフラストラクチャ構築に対応できるだけではありません。また、細分化された業界や差別化されたアプリケーションのニーズを満たし、コンピューティング リソースの使用率を向上させ、コンピューティング能力の柔軟な展開とスケジューリングをサポートすることもできます。

エッジ コンピューティング リファレンス アーキテクチャ

エッジ コンピューティング リファレンス アーキテクチャの各層は、モデル化されたオープン インターフェイスを提供し、垂直管理サービスとデータ フル ライフ サイクル サービスを通じて、アーキテクチャのフルレベルのオープン性を実現します。ビジネスプロセスとライフサイクル全体にわたってインテリジェントなサービスを実現するセキュリティサービス。

自動運転システムにおけるエッジコンピューティング技術

上の図に示すように、エッジ コンピューティングのリファレンス アーキテクチャには主に次の内容が含まれます。

システム全体は、インテリジェント サービス、ビジネス オーケストレーションに分割されます。 、エッジクラウドとエッジコンピューティング ノードの第 4 層では、エッジコンピューティングがクラウドとフィールドデバイスの間に位置し、下位ではさまざまなフィールドデバイスのアクセスをサポートし、上位ではクラウドに接続できます。エッジ層には、エッジ ノードとエッジ マネージャーという 2 つの主要な部分が含まれています。エッジノードはハードウェアであり、エッジコンピューティングサービスを提供する中核であり、エッジマネージャーはソフトウェアであり、主な機能はエッジノードを一元管理することです。エッジ コンピューティング ノードには通常、コンピューティング リソース、ネットワーク リソース、ストレージ リソースがあります。エッジ コンピューティング システムは 2 つの方法でリソースを使用します。1 つは、コンピューティング リソース、ネットワーク リソース、ストレージ リソースを直接カプセル化し、呼び出しインターフェイスを提供します。エッジ マネージャーはエッジ ノード リソースを使用します。コードのダウンロード、ネットワーク ポリシーの構成、およびデータベースの操作で使用されます。第 2 に、エッジ ノードのリソースは機能領域に応じて機能モジュールにさらにカプセル化され、エッジ マネージャーはモデル駆動型のビジネス オーケストレーションを通じて機能モジュールを組み合わせて呼び出し、統合開発とエッジ コンピューティング サービスの機敏な展開。

エッジ コンピューティングのハードウェア インフラストラクチャ

1. エッジ サーバー

エッジ サーバーは、エッジ コンピューティングおよびエッジ データ センターの主要なコンピューティング キャリアであり、コンピューター ルームに導入できます。オペレーターの。エッジ コンピューティング環境は大きく異なり、エッジ サービスにはレイテンシ、帯域幅、GPU、AI の観点から要件が個別に設定されているため、エンジニアはオンサイトでの運用を最小限に抑え、ステータス収集、運用制御、管理インターフェイスなどの強力な管理および運用能力を備えている必要があります。リモートおよび自動管理を実現します。

自動運転システムにおけるエッジコンピューティング技術


自動運転システムでは、通常、コンピューティング、ストレージ、ネットワーク、仮想化を有機的に統合するためにインテリジェント エッジ オールインワン マシンが使用されます。 、環境電力などの製品を産業用コンピュータに統合して、自動運転システムの通常の動作を容易にします。

2. エッジ アクセス ネットワーク

エッジ コンピューティング アクセス ネットワークとは、ユーザー システムからエッジ コンピューティング システムに渡される一連のネットワーク インフラストラクチャを指します。ネットワーク ネットワークおよびエッジゲートウェイなどまた、コンバージェンス、低遅延、大帯域幅、大規模接続、高セキュリティなどの機能も備えています。

3. エッジ内部ネットワーク

エッジ コンピューティング内部ネットワークとは、サーバーに接続されたネットワーク機器、サーバーと相互接続されたネットワーク機器など、エッジ コンピューティング システムの内部ネットワーク インフラストラクチャを指します。外部ネットワークおよびそれによって構築されるネットワーク機器 ネットワーク等エッジ コンピューティングの内部ネットワークは、簡素化されたアーキテクチャ、完全な機能、および大幅に削減されたパフォーマンス損失という特徴を備えていると同時に、エッジとクラウドのコラボレーションと集中管理と制御を実現できます。

エッジコンピューティングシステムは本来分散的な性質を持っているため、個々の規模は小さいものの数が多く、単一点管理方式を採用すると運用上のニーズを満たすことが難しく、産業用コンピュータのリソースも占有してしまいます。一方で、エッジ コンピューティング ビジネスでは、エンドツーエンドの遅延、帯域幅、セキュリティがより重視されるため、エッジ クラウドとエッジの連携も非常に重要です。一般に、一定の範囲内のすべてのエッジ コンピューティング システムのネットワーク インフラストラクチャを均一に管理および制御し、集中管理をサポートすることでネットワークとコンピューティング リソースの自動化を確実にするには、インテリジェントなクロスドメイン管理およびオーケストレーション システムをクラウド コンピューティング システムに導入する必要があります。エッジとクラウドのコラボレーションに基づく管理モデル、効率的な構成。

4. エッジ コンピューティング相互接続ネットワーク

エッジ コンピューティング相互接続ネットワークには、エッジ コンピューティング システムからクラウド コンピューティング システム (パブリック クラウド、プライベート クラウド、通信クラウド、ユーザー構築クラウドなど) が含まれます。 .)、その他 エッジ コンピューティング システムとさまざまなデータ センターを通過するネットワーク インフラストラクチャ。エッジ コンピューティング相互接続ネットワークには、接続の多様化とクロスドメイン遅延の低さという特徴があります。

エッジコンピューティングと自動運転システムをどのように組み合わせるか

次の段階で、より高次の自動運転システムのタスクを実現するには、車両単体の知能だけではまったく不十分です。

自動運転分野におけるエッジコンピューティングの主な応用例は協調センシングとタスクオフロードであり、これら2つの技術により高度な自動運転の実現が可能になります。協調センシング技術により、自動車が他のエッジノードからセンサー情報を取得できるようになり、自動運転車のセンシング範囲が拡大し、環境データの完全性が向上します。自動運転を例に挙げると、自動車にはLIDARやカメラなどのセンサーが統合されるとともに、車両ネットワークV2Xなどを通じて車両、道路、交通データを統合的に把握し、従来よりも多くの情報を取得する必要があります。 1 台の車両の内部および外部センサーを統合し、視覚範囲を超えた視認性を向上させ、高精細 3D ダイナミック マップを通じて範囲内の環境を認識し、自動運転位置をリアルタイムに共有します。収集されたデータは、道路エッジノードおよび周囲の車両と相互作用して、認識機能を拡張し、車両間および車両対道路のコラボレーションを実現します。クラウド コンピューティング センターは、広範囲に分散したエッジ ノードからデータを収集し、交通システムの運行状況を感知し、ビッグ データと人工知能アルゴリズムを通じてエッジ ノード、交通信号システム、車両に適切な配車指示を発行することにより、システムの運用を改善します。 。 効率。例えば、雨や雪、濃霧などの悪天候や、交差点や曲がり角などのシーンでは、レーダーやカメラでは前方の障害物を明確に認識できないため、V2xを利用して道路や走行などのリアルタイムデータを取得し、インテリジェントに運転することができます。道路状況を予測し、事故を回避します。

自動運転レベルの向上と搭載されるスマートセンサーの数の増加に伴い、自動運転車は毎日大量の生データを生成します。これらの生データには、ローカルのリアルタイム処理、融合、および深層学習に基づくターゲットの検出と追跡を含む特徴抽出が必要です。同時に、V2X を使用して環境、道路、その他の車両の認識を向上させ、リアルタイムのモデリングと位置決め、経路計画と選択、および安全に制御するための運転戦略の調整に 3D 高解像度マップを使用する必要があります。車両。これらのタスクは車両内で常にリアルタイムの処理と応答を必要とするため、それらを実行するには強力で信頼性の高いエッジ コンピューティング プラットフォームが必要です。コンピューティング タスクの多様性を考慮すると、実行効率を向上させ、消費電力とコストを削減するには、一般に異種コンピューティング プラットフォームをサポートする必要があります。

自動運転システムにおけるエッジコンピューティング技術

自動運転のエッジ コンピューティング アーキテクチャは、エッジ クラウド コラボレーションと、LTE/5G によって提供される通信インフラストラクチャとサービスに依存しています。エッジ側とは主に、車載装置、路側装置 (RSU)、またはモバイル エッジ コンピューティング (MEC) サーバーを指します。このうち、車載機は環境認識、意思決定計画、車両制御の主体となりますが、RSUやMECサーバーとの連携に依存しており、例えばRSUは車載機に対してより詳細な情報を提供します。道路や歩行者にも適していますが、一部の機能はより適しており、クラウド上で実行することもできます。たとえば、車両の遠隔制御、車両のシミュレーションと検証、ノード管理、データの永続化と管理などです。

自動運転システムのエッジ コンピューティングでは、負荷統合、ヘテロジニアス コンピューティング、リアルタイム処理、接続と相互運用性、安全性の最適化などの利点を実現できます。

1.「負荷の統合」

ADAS、IVI、デジタル計器、ヘッドアップ ディスプレイ、リア エンターテインメント システムなどのさまざまな属性を持つ負荷を、仮想化コンピューティングを通じて同じハードウェア プラットフォーム上で実行します。同時に、仮想化とハードウェア抽象化レイヤーに基づいた負荷統合により、クラウド ビジネス オーケストレーション、深層学習モデルの更新、車両駆動システム全体のソフトウェアとファームウェアのアップグレードの実装が容易になります。

2. 「ヘテロジニアス コンピューティング」

は、異なるハードウェア プラットフォーム上で実行する際のパフォーマンスとエネルギー消費率の違いに基づいて、自動運転システムのエッジ プラットフォームによって継承される異なる属性を持つコンピューティング タスクを指します。 . 別の計算アプローチを採用します。たとえば、地理位置情報と経路計画、深層学習に基づくターゲットの認識と検出、画像の前処理と特徴抽出、センサー フュージョンとターゲットの追跡などです。 GPU は、ターゲットの認識と追跡のための畳み込み計算の処理に優れています。 CPU は、論理コンピューティング機能のパフォーマンスを向上させ、エネルギー消費を削減します。デジタル信号処理 DSP は、測位などの特徴抽出アルゴリズムでさらなる利点を生み出します。この異種コンピューティング手法により、コンピューティング プラットフォームのパフォーマンスとエネルギー消費率が大幅に向上し、コンピューティングの待ち時間が短縮されます。ヘテロジニアス コンピューティングは、さまざまなコンピューティング タスクに適切なハードウェア実装を選択し、さまざまなハードウェア プラットフォームの利点を最大限に活用し、上位層のソフトウェア インターフェイスを統合することでハードウェアの多様性を保護します。

3. 「リアルタイム処理」

ご存知のとおり、自動運転システムには非常に高いリアルタイム性が求められます。危険な状況ではほんの数秒しか利用できないためです。自動運転システムの場合、衝突を回避するためのブレーキ。さらに、ブレーキ反応時間には、クラウドコンピューティング処理、工場交渉処理時間、車両自体のシステム計算、ブレーキ処理時間を含む駆動システム全体の応答時間が含まれます。自動運転の応答がエッジ コンピューティング プラットフォームの機能モジュールごとにリアルタイム要件に分割される場合。これは、知覚検出時間、融合分析時間、行動経路計画時間に細分化する必要があります。同時に、5G によってもたらされる低遅延と高信頼性のアプリケーション シナリオも非常に重要であるため、ネットワーク全体の遅延も考慮する必要があります。これにより、自動運転車は 1ms 未満のエンドツーエンド遅延と 100% に近い信頼性を実現できます。同時に、5G は優先度に応じてネットワーク処理能力を柔軟に割り当てることができるため、車両制御信号送信の応答速度が向上します。

4. 「接続性と相互運用性」

自動運転車のエッジ コンピューティングは、車両無線通信技術 (V2X、車両間通信) のサポートと切り離すことができません。インテリジェント交通システムの他の要素との通信手段を使用して自動車を運転することは、自動運転車とエッジ ノード間の連携の基礎となります。

現在、V2X は主に専用短距離通信 (DSRC、専用短距離通信) とセルラー ネットワークに基づいています [5]。 DSRCは、車両(V2V、車対車)と車両および道路インフラ(V2I、車対インフラ)間で特に使用される通信規格であり、高いデータ伝送速度と低い遅延を備えています。またはポイントツーマルチポイント通信およびその他の利点。 5Gに代表されるセルラーネットワークは、ネットワーク容量が大きくカバレッジが広いという利点があり、V2I通信やエッジサーバー間の通信に適しています。

5. 「セキュリティの最適化」

エッジ コンピューティングのセキュリティは、エッジ コンピューティングにとって重要な保証であり、クラウド コンピューティングとエッジ コンピューティングの徹底したセキュリティ保護システムを組み合わせた設計により、エッジ インフラストラクチャとエッジ コンピューティングを強化します。ネットワーク、アプリケーション、データの識別とさまざまなセキュリティ脅威に対抗する能力を備え、エッジ コンピューティングの開発のための安全で信頼できる環境を構築します。次世代自動運転システムの 5G コア ネットワークのコントロール プレーンとデータ プレーンは分離されており、NFV によりネットワーク展開がより柔軟になり、エッジ分散コンピューティング展開の成功を確実にします。エッジ コンピューティングにより、より多くのデータ コンピューティングとストレージが中央ユニットからエッジに分散されます。そのコンピューティング能力はデータ ソースの近くに配置されます。一部のデータは、処理のためにクラウドに到達するためにネットワークを経由する必要がなくなり、遅延とネットワーク負荷が軽減されます。データ効率の向上、セキュリティとプライバシー。基地局や路側機など、車両に近い将来のモバイル通信デバイスには、ローカル データ処理、暗号化、意思決定を適切に完了し、リアルタイムを提供できる車両インターネットのエッジ コンピューティングが導入される可能性があります。 、信頼性の高い通信能力です。

概要

エッジ コンピューティングは、環境認識や自動運転のデータ処理において非常に重要な用途を持っています。自動運転車は、エッジノードから環境情報を取得することで認識範囲を拡大でき、コンピューティングタスクをエッジノードにオフロードしてコンピューティングリソース不足の問題を解決することもできます。クラウド コンピューティングと比較して、エッジ コンピューティングは長距離データ伝送によって引き起こされる大幅な遅延を回避し、自動運転車へのより高速な応答を提供し、バックボーン ネットワークの負荷を軽減できます。したがって、段階的な自動運転の研究開発プロセスにおけるエッジコンピューティングの使用は、自動運転の継続的な最適化と開発にとって重要な選択肢となります。

以上が自動運転システムにおけるエッジコンピューティング技術の詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。

このウェブサイトの声明
この記事の内容はネチズンが自主的に寄稿したものであり、著作権は原著者に帰属します。このサイトは、それに相当する法的責任を負いません。盗作または侵害の疑いのあるコンテンツを見つけた場合は、admin@php.cn までご連絡ください。

ホットAIツール

Undresser.AI Undress

Undresser.AI Undress

リアルなヌード写真を作成する AI 搭載アプリ

AI Clothes Remover

AI Clothes Remover

写真から衣服を削除するオンライン AI ツール。

Undress AI Tool

Undress AI Tool

脱衣画像を無料で

Clothoff.io

Clothoff.io

AI衣類リムーバー

AI Hentai Generator

AI Hentai Generator

AIヘンタイを無料で生成します。

ホットツール

メモ帳++7.3.1

メモ帳++7.3.1

使いやすく無料のコードエディター

SublimeText3 中国語版

SublimeText3 中国語版

中国語版、とても使いやすい

ゼンドスタジオ 13.0.1

ゼンドスタジオ 13.0.1

強力な PHP 統合開発環境

ドリームウィーバー CS6

ドリームウィーバー CS6

ビジュアル Web 開発ツール

SublimeText3 Mac版

SublimeText3 Mac版

神レベルのコード編集ソフト(SublimeText3)

自動運転シナリオにおけるロングテール問題を解決するにはどうすればよいでしょうか? 自動運転シナリオにおけるロングテール問題を解決するにはどうすればよいでしょうか? Jun 02, 2024 pm 02:44 PM

昨日の面接で、ロングテール関連の質問をしたかと聞かれたので、簡単にまとめてみようと思いました。自動運転のロングテール問題とは、自動運転車におけるエッジケース、つまり発生確率が低い考えられるシナリオを指します。認識されているロングテール問題は、現在、単一車両のインテリジェント自動運転車の運用設計領域を制限している主な理由の 1 つです。自動運転の基礎となるアーキテクチャとほとんどの技術的問題は解決されており、残りの 5% のロングテール問題が徐々に自動運転の開発を制限する鍵となってきています。これらの問題には、さまざまな断片的なシナリオ、極端な状況、予測不可能な人間の行動が含まれます。自動運転におけるエッジ シナリオの「ロング テール」とは、自動運転車 (AV) におけるエッジ ケースを指します。エッジ ケースは、発生確率が低い可能性のあるシナリオです。これらの珍しい出来事

Stable Diffusion 3 の論文がついに公開され、アーキテクチャの詳細が明らかになりましたが、Sora の再現に役立つでしょうか? Stable Diffusion 3 の論文がついに公開され、アーキテクチャの詳細が明らかになりましたが、Sora の再現に役立つでしょうか? Mar 06, 2024 pm 05:34 PM

StableDiffusion3 の論文がついに登場しました!このモデルは2週間前にリリースされ、Soraと同じDiT(DiffusionTransformer)アーキテクチャを採用しており、リリースされると大きな話題を呼びました。前バージョンと比較して、StableDiffusion3で生成される画像の品質が大幅に向上し、マルチテーマプロンプトに対応したほか、テキスト書き込み効果も向上し、文字化けが発生しなくなりました。 StabilityAI は、StableDiffusion3 はパラメータ サイズが 800M から 8B までの一連のモデルであると指摘しました。このパラメーター範囲は、モデルを多くのポータブル デバイス上で直接実行できることを意味し、AI の使用を大幅に削減します。

自動運転と軌道予測についてはこの記事を読めば十分です! 自動運転と軌道予測についてはこの記事を読めば十分です! Feb 28, 2024 pm 07:20 PM

自動運転では軌道予測が重要な役割を果たしており、自動運転軌道予測とは、車両の走行過程におけるさまざまなデータを分析し、将来の車両の走行軌跡を予測することを指します。自動運転のコアモジュールとして、軌道予測の品質は下流の計画制御にとって非常に重要です。軌道予測タスクには豊富な技術スタックがあり、自動運転の動的/静的知覚、高精度地図、車線境界線、ニューラル ネットワーク アーキテクチャ (CNN&GNN&Transformer) スキルなどに精通している必要があります。始めるのは非常に困難です。多くのファンは、できるだけ早く軌道予測を始めて、落とし穴を避けたいと考えています。今日は、軌道予測に関するよくある問題と入門的な学習方法を取り上げます。関連知識の紹介 1. プレビュー用紙は整っていますか? A: まずアンケートを見てください。

SIMPL: 自動運転向けのシンプルで効率的なマルチエージェント動作予測ベンチマーク SIMPL: 自動運転向けのシンプルで効率的なマルチエージェント動作予測ベンチマーク Feb 20, 2024 am 11:48 AM

原題: SIMPL: ASimpleandEfficientMulti-agentMotionPredictionBaselineforAutonomousDriving 論文リンク: https://arxiv.org/pdf/2402.02519.pdf コードリンク: https://github.com/HKUST-Aerial-Robotics/SIMPL 著者単位: 香港科学大学DJI 論文のアイデア: この論文は、自動運転車向けのシンプルで効率的な動作予測ベースライン (SIMPL) を提案しています。従来のエージェントセントとの比較

エンドツーエンドおよび次世代の自動運転システムと、エンドツーエンドの自動運転に関する誤解について話しましょう。 エンドツーエンドおよび次世代の自動運転システムと、エンドツーエンドの自動運転に関する誤解について話しましょう。 Apr 15, 2024 pm 04:13 PM

この 1 か月間、いくつかのよく知られた理由により、私は業界のさまざまな教師やクラスメートと非常に集中的な交流をしてきました。この交換で避けられない話題は当然、エンドツーエンドと人気の Tesla FSDV12 です。この機会に、現時点での私の考えや意見を整理し、皆様のご参考とご議論に役立てたいと思います。エンドツーエンドの自動運転システムをどのように定義するか、またエンドツーエンドで解決することが期待される問題は何でしょうか?最も伝統的な定義によれば、エンドツーエンド システムとは、センサーから生の情報を入力し、関心のある変数をタスクに直接出力するシステムを指します。たとえば、画像認識では、従来の特徴抽出 + 分類子方式と比較して、CNN はエンドツーエンドと言えます。自動運転タスクでは、各種センサー(カメラ/LiDAR)からのデータを入力

nuScenes の最新 SOTA | SparseAD: スパース クエリは効率的なエンドツーエンドの自動運転に役立ちます。 nuScenes の最新 SOTA | SparseAD: スパース クエリは効率的なエンドツーエンドの自動運転に役立ちます。 Apr 17, 2024 pm 06:22 PM

先頭と開始点に書かれている エンドツーエンドのパラダイムでは、統一されたフレームワークを使用して自動運転システムのマルチタスクを実現します。このパラダイムの単純さと明確さにも関わらず、サブタスクにおけるエンドツーエンドの自動運転手法のパフォーマンスは、依然としてシングルタスク手法に比べてはるかに遅れています。同時に、以前のエンドツーエンド手法で広く使用されていた高密度鳥瞰図 (BEV) 機能により、より多くのモダリティやタスクに拡張することが困難になります。ここでは、スパース検索中心のエンドツーエンド自動運転パラダイム (SparseAD) が提案されています。このパラダイムでは、スパース検索は、高密度の BEV 表現を使用せずに、空間、時間、タスクを含む運転シナリオ全体を完全に表します。具体的には、統合されたスパース アーキテクチャが、検出、追跡、オンライン マッピングなどのタスク認識のために設計されています。さらに、重い

FisheyeDetNet: 魚眼カメラに基づいた最初のターゲット検出アルゴリズム FisheyeDetNet: 魚眼カメラに基づいた最初のターゲット検出アルゴリズム Apr 26, 2024 am 11:37 AM

目標検出は自動運転システムにおいて比較的成熟した問題であり、その中でも歩行者検出は最も初期に導入されたアルゴリズムの 1 つです。ほとんどの論文では非常に包括的な研究が行われています。ただし、サラウンドビューに魚眼カメラを使用した距離認識については、あまり研究されていません。放射状の歪みが大きいため、標準のバウンディング ボックス表現を魚眼カメラに実装するのは困難です。上記の説明を軽減するために、拡張バウンディング ボックス、楕円、および一般的な多角形の設計を極/角度表現に探索し、これらの表現を分析するためのインスタンス セグメンテーション mIOU メトリックを定義します。提案された多角形モデルの FisheyeDetNet は、他のモデルよりも優れたパフォーマンスを示し、同時に自動運転用の Valeo 魚眼カメラ データセットで 49.5% の mAP を達成しました。

DualBEV: BEVFormer および BEVDet4D を大幅に上回る、本を開いてください! DualBEV: BEVFormer および BEVDet4D を大幅に上回る、本を開いてください! Mar 21, 2024 pm 05:21 PM

この論文では、自動運転においてさまざまな視野角 (遠近法や鳥瞰図など) から物体を正確に検出するという問題、特に、特徴を遠近法 (PV) 空間から鳥瞰図 (BEV) 空間に効果的に変換する方法について検討します。 Visual Transformation (VT) モジュールを介して実装されます。既存の手法は、2D から 3D への変換と 3D から 2D への変換という 2 つの戦略に大別されます。 2D から 3D への手法は、深さの確率を予測することで高密度の 2D フィーチャを改善しますが、特に遠方の領域では、深さ予測に固有の不確実性により不正確さが生じる可能性があります。 3D から 2D への方法では通常、3D クエリを使用して 2D フィーチャをサンプリングし、Transformer を通じて 3D と 2D フィーチャ間の対応のアテンション ウェイトを学習します。これにより、計算時間と展開時間が増加します。

See all articles