[論文レビュー] The Matter of Time -- A General and Efficient System for Precise Sensor Synchronization in Robotic Computing

Shaoshan Liu, Yu Bo+6 more|arXiv (Cornell University)|Mar 30, 2021

Robotics and Automated Systems参考文献 10被引用数 4

ひとこと要約

本論文は、SoCインタフェースでのセンサデータのタイムスタンプ処理により、マイクロ秒レベルの精度を達成する一般化されたFPGAベースのハードウェア同期システムを提示する。ソフトウェアに起因する遅延を最小限に抑えることで、自律走行車両やロボットにおける信頼性の高い機内および複数マシン間同期を実現する。システムは低リソース消費（6.9K LUT、7.1Kレジスタ）で、LiDARでは±100 μs、カメラ/IMUではサイクルレベルの高精度を実現する。

ABSTRACT

Time synchronization is a critical task in robotic computing such as autonomous driving. In the past few years, as we developed advanced robotic applications, our synchronization system has evolved as well. In this paper, we first introduce the time synchronization problem and explain the challenges of time synchronization, especially in robotic workloads. Summarizing these challenges, we then present a general hardware synchronization system for robotic computing, which delivers high synchronization accuracy while maintaining low energy and resource consumption. The proposed hardware synchronization system is a key building block in our future robotic products.

研究の動機と目的

• センサのずれが認識や位置特定に誤差をもたらす自律ロボットシステムにおける正確な時刻同期の重要な課題に対処する。
• 変動する遅延を引き起こし、同期精度を低下させるソフトウェアベースのタイムスタンプ処理の限界を克服する。
• 機内（単一ロボット内）および複数ロボット間（複数ロボット間）の両方の同期をサポートする汎用的なハードウェアソリューションを設計する。
• 組み込みロボットシステムへの展開を可能にするために、低エネルギーおよび低リソース消費を確保する。
• GPSに代わるグローバル時刻基準としてSCLKを使用する宇宙探査環境への適応を図ることで、システムの適用範囲を拡張する。

提案手法

• Xilinx Zynq FPGAベースのSoC上に同期システムを実装し、ARM CPUクラスタとFPGAファブリックの両方を活用したハイブリッド処理を実現する。
• ホストアプリケーションではなく、センサインタフェース（例：MIPI、CAN、イーサーネット、シリアルポート）でタイムスタンプを取得することで、タイミングジタと遅延を低減する。
• ハードウェアトリガ回路を用いてカメラおよびIMUの同期パulsesを生成し、タイムスタンプ処理をサイクルレベルの精度で実現する。
• LiDARフレーム同期に精密時刻プロトコル（PTP）を統合し、フレーム間で100 μs未満の変動を達成する。
• GPS、IMU、CAN、トリガ回路用のFPGA論理をカスタマイズするとともに、MIPIおよびイーサーネットインタフェースにはXilinxのIPコアを再利用する。
• Armコアをプロトコル処理、設定管理、ユーザアプリケーションインターフェースに割り当て、リアルタイム同期ロジックから制御を分離する。

実験結果

リサーチクエスチョン

• RQ1 多様なセンサタイプを有する現実世界のロボットシステムにおいて、どのようにして高精度かつ効率的なセンサ同期を実現できるか？
• RQ2 機内および複数マシン間の両方のシナリオに適応可能な汎用同期システムを実現するための主要な設計原則は何か？
• RQ3 SoCインタフェースでのハードウェアタイムスタンプ処理は、ソフトウェアベースのアプローチと比較して、どれほどタイミングジタを低減できるか？
• RQ4 カメラ、IMU、LiDAR、レーダーといった異なるセンサにおいて、最小限のリソースオーバーヘッドで高精度を維持できるか？
• RQ5 GPSが利用できない宇宙環境において、SCLKをグローバル時刻基準として使用する場合に、システムをどのように適合できるか？

主な発見

• カメラおよびIMUのタイムスタンプ処理において、SoCインタフェースでセンサをトリガし、タイムスタンプをキャプチャすることで、サイクルレベルの精度を達成する。
• PTPを用いたLiDARフレーム同期では、フレーム間のタイミング変動が100 μs未満に抑えられ、高い一貫性が確保される。
• ハードウェア実装はわずか6.9K LUTおよび7.1Kレジスタを消費し、組み込みシステムへの展開に適した低リソースオーバーヘッドを示している。
• カメラとIMUの40 msの同期ずれは、VIOポーズ推定において10 mの並進誤差および最大3°の回転誤差を引き起こすため、正確な同期の重要性が顕著に示される。
• システムは機内および複数マシン間の両方の同期をサポートしており、GPSをSCLKに置き換えることで宇宙ミッションに適応可能な設計が可能である。
• オブジェクト検出において許容可能な同期誤差は、40 m/sの速度で0.5 IoUを要求する場合、34 msまでにまで低減可能であり、高速応用におけるミリ秒未満の精度の重要性が強調される。