Ego Camera – ハードウェア同期IMUによるグローバルシャッターステレオビジョンを用いた、身体化されたAI

ロボット学習におけるハードウェアギャップ

ロボット産業はデータ不足という問題を抱えている。主要な研究機関は、高度な操作ポリシーを訓練するために、今後2～3年で1億時間から10億時間分の自己中心（一人称視点）データが必要になると推定している。研究コミュニティはこれに応え、Open-AoEは2,000時間分の自己中心ビデオを公開し、EgoDexは3Dハンドトラッキング機能を備えた829時間分のデータを提供し、EgoVerseは数千もの実世界のタスクを網羅した1,362時間分の人間によるデモンストレーションデータを提供している。

しかし、問題があります。このデータを収集するために使用されるハードウェアが、需要に追いついていないのです。現在、ほとんどの自己中心型データセットは、スマートフォン、アクションカメラ、VRヘッドセットといっ​​た、用途を変えた一般消費者向けデバイスを使用して収集されています。これらのデバイスは、ロボット学習のデータ収集用に設計されたものではありません。グローバルシャッターセンサー、ハードウェア同期、工場出荷時キャリブレーションといった、使用可能なトレーニングデータを作成するために不可欠な機能が欠けているのです。

エゴカメラ – 自己中心的なデータ収集のために特別に設計されたカメラ

Ego Cameraは、この状況を変えるものです。これは、ロボットのトレーニングデータ専用のヘッドマウント型ステレオカメラであり、既存製品の流用ではありません。模倣学習や身体化されたAIデータ収集のためのウェアラブルデータキャプチャデバイスとして特別に設計されており、ロボット学習の進歩を阻害してきたハードウェアのギャップを解消します。

主な機能

統一ナノ秒タイムスタンプ

すべてのカメラフレームとすべてのIMUサンプルは同じハードウェアクロックを共有し、ナノ秒レベルの時間的整合性を実現します。データセット収集用のハードウェアタイムスタンプを備えたこのステレオカメラは、プロフェッショナルな自己中心型ベンチマークやVIOパイプラインに必要な精度基準を満たしています。

箱から取り出せるもの

• 左右のステレオ映像を同期させた動画（MP4形式）
• ハードウェアタイムスタンプ付き6軸IMUデータ（CSV形式）
• 工場出荷時のキャリブレーションファイル（YAML形式）
• Windows、Linux、ROS向けの完全なSDK/API
• USBプラグアンドプレイ接続

対象者は誰ですか？

大学の研究室、AI開発企業、データ収集サービスプロバイダーなど、どのような組織であっても、Ego Cameraはロボットデータ収集に最適なウェアラブルカメラです。AIデータセット収集用のステレオビジョンヘッドセットとして、またAI研究用の費用対効果の高いヘッドマウントカメラとして機能し、キャリブレーションの手間をかけずにプロレベルのデータ品質を実現します。