[论文解读] Thinking Adaptive: Towards a Behaviours Virtual Laboratory

Carlos Gershenson, Pedro Pablo González Pérez+1 more|ArXiv.org|Nov 21, 2002

Reinforcement Learning in Robotics参考文献 9被引用 11

一句话总结

本文提出了一种行为虚拟实验室，用于研究人工智能代理的适应性行为，重点在于通过计算框架实现动作选择。该实验室展示了如何使生物学家和人工智能研究人员能够模拟并分析适应性决策过程，实验表明，通过去中心化、反应式的机制可涌现出复杂的行为。

ABSTRACT

In this paper we name some of the advantages of virtual laboratories; and propose that a Behaviours Virtual Laboratory should be useful for both biologists and AI researchers, offering a new perspective for understanding adaptive behaviour. We present our development of a Behaviours Virtual Laboratory, which at this stage is focused in action selection, and show some experiments to illustrate the properties of our proposal, which can be accessed via Internet.

研究动机与目标

• 开发一个用于研究人工代理和生物系统适应性行为的虚拟实验室。
• 通过模拟弥合人工智能研究与行为生物学理解之间的差距。
• 将动作选择机制作为适应性行为的核心组成部分。
• 提供一个可访问的、基于网络的平台，用于实验和观察行为动态。
• 通过共享的模拟工具，促进人工智能研究人员与生物学家之间的跨学科合作。

提出的方法

• 行为虚拟实验室被实现为一个可基于网络访问的人工代理仿真环境。
• 代理采用反应式、基于行为的架构，具有优先级排序的动作选择机制。
• 该系统采用去中心化的决策方法，代理根据当前的感官输入和内部优先级选择动作。
• 通过配置代理参数并在动态环境中观察其行为模式，开展实验。
• 该平台支持对代理行为进行实时可视化和日志记录，以供分析。
• 该架构设计为可扩展，支持集成新行为和环境模型。

实验结果

研究问题

• RQ1 虚拟实验室如何促进对人工代理适应性行为的研究？
• RQ2 在复杂、动态环境中，哪些机制能够实现稳健的动作选择？
• RQ3 共享的模拟平台能否支持人工智能与生物学之间的跨学科研究？
• RQ4 简单、反应式的代理架构会涌现出哪些类型的行为？
• RQ5 该虚拟实验室如何支持对行为多样性和适应性的探索？

主要发现

• 行为虚拟实验室成功支持了人工代理中适应性动作选择的模拟。
• 在代理交互中观察到了诸如冲突解决和优先级排序等涌现行为模式。
• 该平台支持实时实验与可视化，增强了对行为动态的理解。
• 该系统证明了基于网络的工具在人工智能研究中实现复杂行为模拟的可行性。
• 该方法提供了一个可扩展的框架，可用于在多种环境条件下研究适应性行为。
• 实验结果证实，去中心化、反应式架构能够在无集中控制的情况下产生复杂且适应性强的行为。