[論文レビュー] A Practical Framework of Key Performance Indicators for Multi-Robot Lunar and Planetary Field Tests

Julia Richter, David Oberacker+11 more|arXiv (Cornell University)|Jan 28, 2026

Planetary Science and Exploration被引用数 0

ひとこと要約

要約: 本論文は、異種多ロボットの月面探査任務を対象としたシナリオ駆動型KPIフレームワークを提案し、現場でのパフォーマンスを科学目的と結びつけ、現場展開での実用性を検証する。

ABSTRACT

Robotic prospecting for critical resources on the Moon, such as ilmenite, rare earth elements, and water ice, requires robust exploration methods given the diverse terrain and harsh environmental conditions. Although numerous analog field trials address these goals, comparing their results remains challenging because of differences in robot platforms and experimental setups. These missions typically assess performance using selected, scenario-specific engineering metrics that fail to establish a clear link between field performance and science-driven objectives. In this paper, we address this gap by deriving a structured framework of KPI from three realistic multi-robot lunar scenarios reflecting scientific objectives and operational constraints. Our framework emphasizes scenario-dependent priorities in efficiency, robustness, and precision, and is explicitly designed for practical applicability in field deployments. We validated the framework in a multi-robot field test and found it practical and easy to apply for efficiency- and robustness-related KPI, whereas precision-oriented KPI require reliable ground-truth data that is not always feasible to obtain in outdoor analog environments. Overall, we propose this framework as a common evaluation standard enabling consistent, goal-oriented comparison of multi-robot field trials and supporting systematic development of robotic systems for future planetary exploration.

研究の動機と目的

• 多ロボット月面探査ミッションの科学に沿った頑健な評価を推進する。
• 三つの現実的な月面シナリオを反映して、科学目標と運用制約を反映した構造化されたKPIを導出する。
• 効率、頑健性、精度をミッション目標に結びつける実用的なフレームワークを提供する。
• KPIフレームワークの現場実験での適用可能性と限界を示す。

提案手法

• 潮汐的推定ではなく軌道プロキシと科学目標に基づくイルメナイト、REE、極域水氷を狙う三つのミッションシナリオを定義する。
• これらのシナリオからKPIを導出し、ミッション要求をKPIカテゴリ（Efficiency, Robustness, Precision）へマッピングする。
• 正式なKPI定義を提案する（例：Mapping Efficiency、Mapping Rate、Task Success Ratio、Robot Downtime、Autonomy Ratio、Time in Unscheduled Manual Operations、Retry Ratio、Science Acquisition Density、Ratio of Identified Resources、localization/placement/remote-sensing/map errors）。
• KPIの関連性がシナリオとミッションフェーズによってどう変わるかを分析し、実用的な測定戦略とデータ要件を議論する。
• 効率・頑健性に関連するKPIに焦点を当てた多ロボット現場テストでフレームワークを検証し、地上真データを要する精度KPIの課題を評価する。

Figure 1: Scenario 1 (Ilmenite). (a) LROC (Lunar Reconnaissance Orbiter) low-incidence image mosaic with landing zone (LZ), preliminary prospecting grid (white), and elevation transect (orange, red, blue, purple). (b) Elevation profile along the transect. (c–f) Selected orbital maps showcasing therm

実験結果

リサーチクエスチョン

• RQ1 異種多ロボット月面現場試験の科学駆動目標を反映するようにKPIを設計するにはどうすればよいか。
• RQ2 シナリオベースのKPIフレームワークは、複数のロボット現場テストの意味のある横断比較を可能にするか。
• RQ3 現場展開で実測可能なKPIはどれで、正確な指標にはどのデータが必要か。
• RQ4 月面資源探査の異なるシナリオとミッションフェーズでKPIの優先度はどう変わるか。

主な発見

• シナリオに基づくKPIフレームワークは、月面現場試験の効率、頑健性、精度を定量化できる。
• 効率と頑健性のKPIは状態ログと軌跡データで実用的に抽出可能だが、精度KPIは地上真データを要し、屋外アナログ環境では難しい場合がある。
• このフレームワークは目標指向の評価と横断比較を支援し、従来のエンジニアリング指標の限界に対処する。
• 地上真データの入手性は現場実験での精度関連KPIの実現可能性に大きく影響する。
• 現場展開は時間・活動ベースのKPIの抽出を実用的であることを示し、明示的なタスク記録の必要性を浮き彫りにした。

Figure 2: General timeline of the mission concept, indicating relevant KPI focus for each phase.