[論文レビュー] A Practical Guide to Studying Emergent Communication through Grounded Language Games

Jens Nevens, Paul Van Eecke+1 more|Lirias (KU Leuven)|Apr 20, 2020

Language and cultural evolution参考文献 28被引用数 4

ひとこと要約

本論文では、Babelソフトウェアシステムに基づく実用的なツールキットを提示する。このツールキットを用いることで、センサモータ、概念的、言語的処理をモジュラーかつ拡張可能なロボットインターフェースを通じて統合し、物理的ロボットを用いた基礎づけられた言語ゲーム実験を研究者が実施可能となる。本フレームワークは、基礎づけられた色の名前ゲームを通じて実証され、リアルタイムの認識および音声機能を備えたロボット間の反復的でタスク指向の相互作用によって、現実世界の通信システムがどのように出現するかを示している。

ABSTRACT

The question of how an effective and efficient communication system can emerge in a population of agents that need to solve a particular task attracts more and more attention from researchers in many fields, including artificial intelligence, linguistics and statistical physics. A common methodology for studying this question consists of carrying out multi-agent experiments in which a population of agents takes part in a series of scripted and task-oriented communicative interactions, called 'language games'. While each individual language game is typically played by two agents in the population, a large series of games allows the population to converge on a shared communication system. Setting up an experiment in which a rich system for communicating about the real world emerges is a major enterprise, as it requires a variety of software components for running multi-agent experiments, for interacting with sensors and actuators, for conceptualising and interpreting semantic structures, and for mapping between these semantic structures and linguistic utterances. The aim of this paper is twofold. On the one hand, it introduces a high-level robot interface that extends the Babel software system, presenting for the first time a toolkit that provides flexible modules for dealing with each subtask involved in running advanced grounded language game experiments. On the other hand, it provides a practical guide to using the toolkit for implementing such experiments, taking a grounded colour naming game experiment as a didactic example.

研究の動機と目的

• シミュレーションモデルと現実世界のロボットインタラクションの間をつなぐ、フルサイクルの基礎づけられた言語ゲーム実験を実装する課題に対処すること。
• センサモータ、概念的、言語的レベルの間で、基礎づけ、概念化、生成、理解、解釈の表記的サイクルをカバーする、柔軟で拡張可能なソフトウェアツールキットを提供すること。
• 研究者が、特にヒューマノイドNaoロボットを用いて、最小限の低レベル統合作業で、高度で現実的な言語ゲーム実験を構築および実行できるようにすること。
• 教育的実装として、基礎づけられた色の名前ゲームを提示し、反復的相互作用を通じて共有通信システムがどのように出現するかを示すこと。

提案手法

• 著者らは、低レベルのロボット制御を抽象化することで、物理的ロボットをマルチエージェント言語ゲーム実験にシームレスに統合できる高レベルのロボットインターフェースを、Babelソフトウェアシステムに拡張した。
• インターフェースは、異なるロボットタイプ（例：Nao）に特化したメソッドを備えた汎用的な関数ベースのアーキテクチャを採用しており、ロボットプラットフォームに応じたコマンドの動的ルーティングを可能にしている。
• Docker化されたPython（Flask）サーバがRESTful APIをホスティングし、Babel API呼び出しをNaoQiフレームワークコマンドに翻訳することで、HTTP POSTリクエストによるNaoロボットのリモート制御を可能にしている。
• 各エージェントごとに永続的なロボット接続をサポートしており、繰り返しの言語ゲーム相互作用中の遅延とオーバーヘッドを低減している。
• 表記的サイクルは、3つのレベルに実装されている：ロボットの認識と行動によるセンサモータ的基礎づけ、内部ワールドモデルによる概念化と解釈、発話生成と解析による言語的生成と理解。
• フレームワークは、エージェントが色の認識と音声を用いて色のついた物体を名前付け・特定する反復的相互作用を通じて、基礎づけられた色の名前ゲームにより検証された。

実験結果

リサーチクエスチョン

• RQ1 物理的ロボットを用いたフルサイクルの基礎づけられた言語ゲーム実験をサポートするスケーラブルでモジュラーなソフトウェアフレームワークをどのように設計できるか？
• RQ2 マルチエージェント通信実験において、センサモータ、概念的、言語的処理をシームレスに統合するためのアーキテクチャパターンは何か？
• RQ3 実用的で再利用可能なツールキットは、現実世界のロボット環境で出現的通信を研究しようとする研究者の実装障壁をどのように低減できるか？
• RQ4 具体的には、色の名前ゲームという基礎づけられた言語ゲームを、提案されたツールキットと物理的ロボットを用いて、どの程度効果的に実装・実行できるか？

主な発見

• Babelロボットインターフェースは、低レベルのロボット制御を抽象化し、異なるロボットプラットフォーム間で一貫したAPIを提供することで、エンドツーエンドの基礎づけられた言語ゲーム実験を成功裏に実現した。
• NaoQiフレームワークとDocker化されたRESTfulサーバーの組み合わせにより、Babelシステムと物理的Naoロボット間で信頼性が高く、低遅延の通信が実現された。
• 永続的なロボット接続は、繰り返しの言語ゲーム相互作用中のセットアップのオーバーヘッドを顕著に低減し、パフォーマンスを向上させた。
• 基礎づけられた色の名前ゲームは、2体のNaoロボット間の反復的でタスク指向の相互作用を通じて、色の用語に関する共有語彙が出現することを明確に示した。
• ツールキットのモジュラー設計により、他のロボットタイプや、複数語発話や文法構造の発展といった追加の言語ゲームシナリオへの拡張が可能である。
• 現実世界のセンサモータデータを表記的サイクルに統合することで、完全にシミュレーションされたアプローチに比べ、より強固で現実的な出現的通信のモデルが実現された。