[論文レビュー] A Robotic Prosthesis for an Amputee Drummer

Mason Bretan, Deepak Gopinath+2 more|arXiv (Cornell University)|Dec 13, 2016

Tactile and Sensory Interactions参考文献 4被引用数 20

ひとこと要約

本論文では、変動インピーダンス制御と共有制御を用いて、ドラム叩きにおける指のようなスティックの反発を模倣する、上腕骨下部切断のドラマー向けのウェアラブルロボット義手を提案する。このシステムは音楽の同期を可能にし、音楽を計算的に分析して反応する自律的な第二のスティックを統合しており、ユーザーの役割を置き換えることなく、人間とロボットの協働によって創造性を高める。

ABSTRACT

The design and evaluation of a robotic prosthesis for a drummer with a transradial amputation is presented. The principal objective of the prosthesis is to simulate the role fingers play in drumming. This primarily includes controlling the manner in which the drum stick rebounds after initial impact. This is achieved using a DC motor driven by a variable impedance control framework in a shared control system. The user's ability to perform with and control the prosthesis is evaluated using a musical synchronization study. A secondary objective of the prosthesis is to explore the implications of musical expression and human-robotic interaction when a second, completely autonomous, stick is added to the prosthesis. This wearable robotic musician interacts with the user by listening to the music and responding with different rhythms and behaviors. We recount some empirical findings based on the user's experience of performing under such a paradigm.

研究の動機と目的

• 上腕骨下部切断のドラマーに対して、ドラム演奏に必要な機敏さと制御力を回復・強化するロボット義手の設計を目的とする。
• ユーザーとロボットが共同して音楽的出力を形作る共有制御を通じて、直感的な人間-ロボットインタラクションを実現することを目的とする。
• リアルタイムでの音楽分析に基づいて即興的に反応する第二のスティックを追加することで、自律的ロボットアーティストの役割を検討することを目的とする。
• 同期タスクとユーザーのフィードバックを通じて、システムの使いやすさと音楽的パフォーマンスを評価することを目的とする。
• ウェアラブルロボットミュージシャンが人間の創造性を補完する方法を調査し、人間の演奏者を置き換えることなく、人間のパフォーマンスを拡張することを目的とする。

提案手法

• 義手は、スティックの反発を制御する可変インピーダンス制御を備えたDCモーターを用い、ドラム叩き時の自然な指の制御を模倣する。
• 共有制御フレームワークにより、ユーザーの筋電位（EMG）信号を通じてスティックのダイナミクスに影響を与え、ロボットがリアルタイムでインピーダンスを調整する。
• システムは、音楽を聴き、計算音楽解析を用いて補完的なリズムを生成する第二の自律的ドラムスティックを統合している。
• リズムの密度をEMGに基づいて制御することで、音楽的行動を実装し、持続的な筋肉の収縮によりリズムの複雑さが増加する。
• システムはオネスト検出と量子化を用い、ユーザーが提供したリズム的「シード」パターンを学習・拡張する。
• 高レベルの音楽的パrameter（例：ノート密度）を低レベルのモーターコマンドにマッピングすることで、身体的および認知的負荷を最小限に抑える。

実験結果

リサーチクエスチョン

• RQ1 プロセスを用いた流暢で快適かつ音楽的に表現力のあるドラム演奏において、最適な人間-ロボットインタラクションの形態は何か？
• RQ2 ウェアラブルロボットミュージシャンは、人間のドラマーの役割を補完するようにどのように設計すべきか？
• RQ3 リアルタイムで音楽的に意味のあるロボット反応を可能にするために、最も効果的なセンシングおよび制御戦略は何か？
• RQ4 認知的および身体的負荷要因は、ユーザーが自律的ロボット肢と協働する能力にどのように影響するか？
• RQ5 自律的ロボットスティックは、即興的演奏とリズム的相互作用を通じて、音楽的創造性を高めることができるか？

主な発見

• ユーザーは音楽的同期タスクを成功裏に完了し、義手の共有制御とリアルタイム応答性の有効性を実証した。
• システムにより、自然な肢のパフォーマンスに比べ、より高速かつ持続可能な複雑なリズムを演奏することが可能になった。
• 自律的な第二のスティックは、音楽的に整合性があり、補完的なリズムを生成し、ユーザーのパフォーマンスに混乱をもたらさずに全体の音楽的出力を向上させた。
• 実証的フィードバックでは、ユーザーがロボットを単なる代替ではなく、創造的コラボレーターとして好む傾向が示された。特に、ユーザーの演奏に応じてリズムのバリエーションを加える場合に顕著であった。
• EMGに基づくノート密度制御により、ユーザーはリズムの複雑さを直感的に調節でき、より強い筋肉信号により、予測可能で表現的な方法でノート密度が増加した。
• 本システムは、ウェアラブルロボットミュージシャンが人間の身体的限界を超えた新たなリズム的可能性を導入することで、音楽的表現を強化できることを示した。