Skip to main content
QUICK REVIEW

[論文レビュー] Dex-Net 3.0: Computing Robust Robot Vacuum Suction Grasp Targets in Point Clouds using a New Analytic Model and Deep Learning

Jeffrey Mahler, Matthew Matl|arXiv (Cornell University)|Sep 19, 2017
Robot Manipulation and LearningEngineering被引用数 18
ひとこと要約

本稿では、3次元点群における頑健な真空吸引 grasping ターゲットを予測するための深層学習フレームワークである Dex-Net 3.0 を提案する。本フレームワークは、新しい柔軟性のある吸引接触モデルを用い、姿勢、材料、摂動に対するシール形成とトルク耐性をモデル化することで、GQ-CNN を 280 万件の合成グリッピングで訓練した結果、物理的ロボット実験で基本的物体で 98%、一般的な物体で 82%、悪質な物体で 58% の成功を達成した。

ABSTRACT

Vacuum-based end effectors are widely used in industry and are often preferred over parallel-jaw and multifinger grippers due to their ability to lift objects with a single point of contact. Suction grasp planners often target planar surfaces on point clouds near the estimated centroid of an object. In this paper, we propose a compliant suction contact model that computes the quality of the seal between the suction cup and local target surface and a measure of the ability of the suction grasp to resist an external gravity wrench. To characterize grasps, we estimate robustness to perturbations in end-effector and object pose, material properties, and external wrenches. We analyze grasps across 1,500 3D object models to generate Dex-Net 3.0, a dataset of 2.8 million point clouds, suction grasps, and grasp robustness labels. We use Dex-Net 3.0 to train a Grasp Quality Convolutional Neural Network (GQ-CNN) to classify robust suction targets in point clouds containing a single object. We evaluate the resulting system in 350 physical trials on an ABB YuMi fitted with a pneumatic suction gripper. When evaluated on novel objects that we categorize as Basic (prismatic or cylindrical), Typical (more complex geometry), and Adversarial (with few available suction-grasp points) Dex-Net 3.0 achieves success rates of 98$\%$, 82$\%$, and 58$\%$ respectively, improving to 81$\%$ in the latter case when the training set includes only adversarial objects. Code, datasets, and supplemental material can be found at http://berkeleyautomation.github.io/dex-net .

研究の動機と目的

  • 産業用ロボットにおける複雑で非平面な物体に対する頑健な吸引グリッピング計画の欠如に取り組む。
  • 不確実性下でのシール形成可能性と外部トルクに対する耐性を評価する物理ベースのモデルを開発する。
  • 学習用にラベル付けされた頑健性を有する 280 万点の合成点群からなる大規模なデータセットを生成する。
  • 実世界の点群において高品質な吸引グリッピングターゲットを分類する GQ-CNN を訓練する。
  • 多様な物体カテゴリ、特に悪質な幾何形状を含む物体において、物理的ロボットシステム上で手法を検証する。

提案手法

  • 候補グリッピングポイントにおけるシール形成の妥当性をテストするため、周囲、曲げ、コーンスプリングを用いた準静的ばねモデルを用いて吸引カップの変形をシミュレートする。
  • カップと物体表面の接触リングから導出される接触トルク基底を用いて、トルク耐性を計算する。
  • 物体姿勢、グリッパー姿勢、摩擦係数、外部トルク(例:重力)の摂動をモンテカルロサンプルで評価し、頑健性を評価する。
  • ランダムにサンプリングされた摂動状態下での外乱トルクに対するグリッピングの耐性に基づき、ベルヌーイ分布を用いてグリッピング成功確率をモデル化する。
  • 合成深度画像上に予測ターゲットを中心としたグリッピングサムネイルを用い、しきい値を適用した頑健性スコアから導出された二値ラベルで GQ-CNN を訓練する。
  • ノイズモデルを備えたオフスクリーンレンダリングと、姿勢およびトルク不確実性の確率的サンプリングを用いる。

実験結果

リサーチクエスチョン

  • RQ1物理ベースの柔軟接触モデルは、非平面表面における吸引カップのシール形成可能性を正確に予測できるか?
  • RQ2姿勢、摩擦、外部力の現実的不確実性下で、トルク耐性の頑健性をどのように定量化できるか?
  • RQ3合成データで訓練された深層学習モデルは、多様な物体幾何形状における実世界の吸引グリッピングに一般化可能か?
  • RQ4ヒューリスティック手法と学習された頑健なグリッピングポリシーの間には、新規の複雑で悪質な物体において、どの程度の性能差があるか?
  • RQ5訓練データに悪質な物体データを含めることで、困難な幾何形状への一般化性能が向上するか?

主な発見

  • 提案された柔軟な吸引接触モデルは、非平面表面におけるシール形成可能性を効果的に予測でき、単純な平面ヒューリスティクスを超えた頑健なグリッピング計画を可能にした。
  • 物理的実験において、基本的物体(角柱または円柱)で 98% の成功率を達成し、ヒューリスティック手法を著しく上回った。
  • 複雑な幾何形状を有する一般的な物体では 82% の成功率を達成し、単純な形状を超えた優れた一般化性能を示した。
  • 有用な吸引グリッピングポイントが少ない悪質な物体では 58% の成功率であったが、訓練データに悪質な物体のみを含めた場合、81% まで向上した。
  • Dex-Net 3.0 で訓練された GQ-CNN は、新規の物体に対しても良好に一般化され、重心や平面表面をターゲットとするベースラインヒューリスティクスを上回った。
  • 頑健性ラベルが付与された 280 万点の合成点群からなるデータセットは、実世界のロボット吸引グリッピングにおける効果的な転移学習を可能にした。

より良い研究を、今すぐ始めましょう

論文の読解から最終レビューまで、研究時間を劇的に削減しましょう。

クレジットカード登録不要

このレビューはAIが作成し、人間の編集者が確認しました。