XNews

NVIDIA Researchがリアルタイム統合LiDARワールドモデル「LidarVerse」を発表

NVIDIA Researchがリアルタイム統合LiDARワールドモデル「LidarVerse」を発表

NVIDIA Researchは、異なるセンサーやタスクにわたるスキャンをシミュレートするリアルタイム統合LiDARワールドモデル「LidarVerse」を発表した。このモデルは、新しい視点から運転シーンを再現し、HDマップからシーンを生成し、将来のセンサー観測を予測し、単一のH100 GPU上で10 FPSで動作する。32、64、128ビームのLiDAR構成をサポートし、論文、コード、チェックポイントとともに公開されている。

イベントのバージョン 1.

Key insights

シミュレーション方式を統合したモデル

LidarVerseは、生成型と再構成型のLiDARシミュレーションを1つの条件付きワールドモデルに統合する。推論方式は、別個のアーキテクチャや予測ヘッドではなく、利用可能なシーン証拠によって決定される。

リアルタイム性能

蒸留された因果チェックポイントは、単一のH100 GPU上で10 FPSで動作する。ユニバーサルLiDARトークナイザーは、32、64、128ビームのセンサーをサポートする。

3つのシミュレーションモード

同じ因果チェックポイントが、シーンレベルの条件からの新規ワールド生成、観測されたLiDARプレフィックスからのポイントクラウド予測、および永続的な空間キャッシュに基づく再構築ベースの再シミュレーションを実行する。

クロスセンサー生成

共同適応後、1つのモデルが同じWaymo HDマップから、32ビームのnuScenes、64ビームのWaymo、128ビームのNVIDIA PAI向けに異なるスキャンパターンを生成する。

システムアーキテクチャ

このシステムは、完全にアテンションベースのレンジイメージトークナイザー、Cosmos-Transfer2.5-2Bから初期化されたフローマッチングDiT教師、4ステップの因果生徒、および時間的・空間的メモリキャッシュを備える。

Source posts