Skip to main content
QUICK REVIEW

[論文レビュー] Optimizing Correlated Graspability Score and Grasp Regression for Better Grasp Prediction

Amaury Depierre, Emmanuel Dellandréa|arXiv (Cornell University)|Jan 31, 2020
Robot Manipulation and Learning参考文献 18被引用数 13
ひとこと要約

本稿では、ジョイント損失関数を用いて、把持可能性スコアリングと把持パラメータの回帰を連携させる、新しい深層学習アーキテクチャを提案する。視覚入力と予測された把持パラメータに基づいて把持品質を評価するスコアラー・ネットワークを訓練することで、本手法はジャックアードデータセットで85.74%の精度を達成し、ベースラインより3.61ポイント上回り、実ロボットでは92.4%の成功率を記録。これは、把持品質評価からのフィードバックを活用して回帰予測を最適化することで、最先端の手法を上回る性能を発揮した。

ABSTRACT

Grasping objects is one of the most important abilities that a robot needs to master in order to interact with its environment. Current state-of-the-art methods rely on deep neural networks trained to jointly predict a graspability score together with a regression of an offset with respect to grasp reference parameters. However, these two predictions are performed independently, which can lead to a decrease in the actual graspability score when applying the predicted offset. Therefore, in this paper, we extend a state-of-the-art neural network with a scorer that evaluates the graspability of a given position, and introduce a novel loss function which correlates regression of grasp parameters with graspability score. We show that this novel architecture improves performance from 82.13% for a state-of-the-art grasp detection network to 85.74% on Jacquard dataset. When the learned model is transferred onto a real robot, the proposed method correlating graspability and grasp regression achieves a 92.4% rate compared to 88.1% for the baseline trained without the correlation.

研究の動機と目的

  • 深層学習に基づく把持予測における、独立した把持可能性スコアリングと把持パラメータ回帰の限界を是正すること。
  • 把持品質評価と回帰出力を連携させることで、一般化性能と実世界での性能を向上させること。
  • より良い内部の把持表現を活用することで、シミュレーテッドデータセットと実ロボット応用との間のリアリティギャップを縮小すること。
  • 主な把持品質スコアに基づいて選別されたアドバーシャル例を用いてスコアラーを訓練することで、モデルのロバスト性を向上させること。
  • 複雑なバックボーンアーキテクチャを必要とせず、ベンチマークデータセットおよび実ロボットシステムで最先端の性能を達成すること。

提案手法

  • 2つのヘッドを持つ二重ヘッドニューラルネットワークを導入:一方のヘッドは把持パラメータ(位置、角度、幅)を回帰し、もう一方のスコアラーは視覚入力と予測された把持パラメータに基づいて把持可能性を評価する。
  • 把持回帰と把持可能性スコアリングを同時に最適化する新しい相関損失関数を提案し、予測された把持が幾何的に正確であると同時に実用的であることを保証する。
  • トレーニング中に上位T個の把持候補を選別するための主な把持品質予測(PGP)ヘッドを用い、その選別された候補を用いてスコアラーを高影響度のアドバーシャル例で訓練する。
  • 特徴抽出(FE)と把持候補生成(PGP)ヘッドを備えたResNet-50バックボーンを採用し、その後に各予測把持の把持可能性スコアを出力するスコアラー・ヘッドを配置する。
  • データオーグメンテーションとトランスファーラーニングを適用し、ジャックアードデータセットでトレーニングし、多様な家庭用および産業用の物体を用いた実FANUCロボットアームで評価する。
  • アブレーションを通じてアンカーサイズとアスペクト比を最適化し、平均アンカーサイズ(91×26)が、網羅的なグリッドサーチを必要とせずに最良のパフォーマンスを発揮することを同定した。

実験結果

リサーチクエスチョン

  • RQ1把持可能性スコアリングと把持パラメータ回帰を連携させることで、全体の把持予測性能が向上するか?
  • RQ2主な品質スコアで選別された上位T個の把持候補でスコアラーを訓練することで、より良い一般化性能と実世界での性能が得られるか?
  • RQ3本手法は、ベンチマークデータセットおよび実ロボットシステムにおける精度の観点で、最先端のアプローチと比較してどのように差をつけるか?
  • RQ4アンカーサイズとアスペクト比が最終的な把持予測精度に与える影響は何か?
  • RQ5本手法のアーキテクチャは、シミュレーテッドデータと実世界のロボット把持の間のリアリティギャップをどの程度縮小するか?

主な発見

  • 本手法はジャックアードデータセットで85.74%の精度を達成し、前回の最先端手法より1.74ポイント向上した。
  • スコアラーを統合しない類似のベースラインと比較して3.61ポイントの向上を示し、相関損失関数とスコアラー統合の有効性を裏付けた。
  • 家庭用15種類および産業用10種類の物体を用いた実ロボット環境では、本手法は92.4%の把持成功率を達成した。これはベースラインの88.1%を上回り、4.3ポイントの向上を示した。
  • 視覚入力と予測された把持パラメータに基づいて出力されるスコアラーの把持可能性スコアは、視覚入力のみに依存する主なスコアよりも正確である。
  • アンカーサイズはパフォーマンスにわずかな影響しか与えず、平均アンカーサイズ(91×26)が最良の結果(85.74%)をもたらし、広範なハイパーパramータチューニングの必要性を排除した。
  • 主なスコアで選別された上位T個の候補でスコアラーを訓練すると、すべての候補で訓練する場合よりも収束が良くなり、パフォーマンスも向上(82.36%)した。これは、アドバーシャル例の選別が極めて重要であることを示している。

より良い研究を、今すぐ始めましょう

論文の読解から最終レビューまで、研究時間を劇的に削減しましょう。

クレジットカード登録不要

このレビューはAIが作成し、人間の編集者が確認しました。