[논문 리뷰] Perspectives on Sim2Real Transfer for Robotics: A Summary of the R:SS 2020 Workshop

Sebastian Höfer, Kostas E. Bekris외 13명|arXiv (Cornell University)|2020. 12. 07.

Robot Manipulation and Learning참고 문헌 12인용 수 34

한 줄 요약

본 논문은 R:SS 2020 Sim2Real 워크숍의 논쟁, 기여 초록, 패널 토론을 요약하고, 시뮬레이션에서 현실로 로봇 기술을 이전하기 위한 실무자 지침과 남은 연구 질문을 제시한다.

ABSTRACT

This report presents the debates, posters, and discussions of the Sim2Real workshop held in conjunction with the 2020 edition of the "Robotics: Science and System" conference. Twelve leaders of the field took competing debate positions on the definition, viability, and importance of transferring skills from simulation to the real world in the context of robotics problems. The debaters also joined a large panel discussion, answering audience questions and outlining the future of Sim2Real in robotics. Furthermore, we invited extended abstracts to this workshop which are summarized in this report. Based on the workshop, this report concludes with directions for practitioners exploiting this technology and for researchers further exploring open problems in this area.

연구 동기 및 목표

• 로봇공학에서 Sim2Real 전이의 정의, 실현 가능성, 중요성에 대한 논쟁을 요약한다.
• 현실 간극을 다루는 주제별 기여 초록과 그 주제를 제시한다.
• 실세계 로봇 작업에 Sim2Real 기법을 적용하기 위한 실무자 지향 지침을 제공한다.
• 향후 연구를 이끌 Sim2Real의 개방형 연구 과제를 식별한다.

제안 방법

• Sim2Real의 핵심 질문을 탐구하기 위해 상반된 역할로 세 가지 논쟁을 구성하였다.
• Sim2Real에 대해 방법, 표현, 데이터 기반 접근법을 제시하는 18편의 동료 심사 초록을 요약하였다.
• 통찰과 향후 방향을 종합하기 위한 패널 토론을 진행하였다.
• 실무자 및 연구자 관점으로 통찰을 분류하여 실행 가능한 지침을 제시하였다.
• Sim2Real 기법의 구체적 권고 사항과 열려 있는 연구 영역을 강조하였다.

실험 결과

연구 질문

• RQ1 Sim2Real이 무엇인가, 이것이 독립된 분야인지 아니면 방법들의 모음인지?
• RQ2 시뮬레이션 기반 학습이 실제 로봇 작업으로 어느 정도까지 이전될 수 있으며 한계는 무엇인가?
• RQ3 현실 간극을 가장 잘 다리는 전략은 무엇인가(예: 도메인 무작위화, 중간 표현, 미분 가능 시뮬레이터)?
• RQ4 생산 수준의 로봈틱스로 Sim2Real을 발전시키기 위한 실용적 지침과 열려 있는 질문은 무엇인가?

주요 결과

• Sim2Real 논쟁은 비용, 민주화, 안전, 현실 간극을 강조했고, 시뮬레이션만으로는 실제 세계에서의 성공에 충분하지 않다는 합의가 있다.
• Sim2Real은 한 분야로 보거나 기술 모음으로 볼 수 있지만, 현실 간극은 여전히 중심 과제로 남아 있다.
• 다리 놓기 방법에는 도메인 무작위화, 명시적 이전 가능한 추상화, 중간 표현, 시뮬레이터를 개선하기 위해 실제 데이터 활용이 포함된다.
• 패널 토론은 작업 비특화 시뮬레이터의 가치를 강조했고 적용 가능성에 대한 주의와 함께, 차별 가능 시뮬레이터와 메타학습 같은 유망한 방향을 제시했다.
• 기여 초록은 형식화, 기존 시뮬레이터와의 다리 놓기, 데이터 기반 모델 개선, 온라인 매개변수 추론에 걸친 다양한 접근을 보여주며 Sim2Real의 다양한 방법을 시사한다.
• 실무자는 Sim2Real 기법을 적용할 때 부트스트래핑, 데이터 효율성, 하드웨어-루프 최적화, 신중한 조정 등을 고려하라는 조언을 받는다.