[논문 리뷰] Character design for soccer commmentary

Kim Binsted|ArXiv.org|1998. 07. 31.

Human Motion and Animation참고 문헌 11인용 수 4

한 줄 요약

이 논문은 로보컵 시뮬레이터 데이터를 사전 분석한 결과를 처리하여 감정 있는 발화와 표정을 생성하는 애니메이티드 토킹 헤드 시스템 Byrne를 제시한다. 성격 기반 감정 모델링과 표준화된 인터페이스를 활용해 게임 상태를 표현적 출력으로 매핑함으로써, 통합된 음성 및 얼굴 애니메이션 시스템을 통해 동적인, 감정적으로 일관된 중계를 가능하게 한다.

ABSTRACT

In this paper we present early work on an animated talking head commentary system called {\bf Byrne}\footnote{David Byrne is the lead singer of the Talking Heads.}. The goal of this project is to develop a system which can take the output from the RoboCup soccer simulator, and generate appropriate affective speech and facial expressions, based on the character's personality, emotional state, and the state of play. Here we describe a system which takes pre-analysed simulator output as input, and which generates text marked-up for use by a speech generator and a face animation system. We make heavy use of inter-system standards, so that future versions of Byrne will be able to take advantage of advances in the technologies that it incorporates.

연구 동기 및 목표

• 게임의 동적 변화에 기반해 감정적으로 표현적인 축구 중계를 제공하는 애니메이티드 토킹 헤드 시스템을 개발하는 것.
• 캐릭터의 성격과 정서 상태를 모델링하여 중계 스타일과 전달 방식에 영향을 주는 것.
• 표준화된 시스템 인터페이스를 사용해 음성 합성과 얼굴 애니메이션을 위한 마크업이 추가된 텍스트를 생성하는 것.
• 향후 개선된 기술의 통합을 위해 상호운용성 표준을 활용해 확장 가능성을 확보하는 것.

제안 방법

• 시스템은 로보컵 축구 시뮬레이터의 사전 분석된 출력을 입력으로 사용한다.
• 성격에 기반한 감정 모델을 활용해 게임 상태를 정서 상태로 매핑한다.
• 표준 형식을 사용해 음성 합성과 얼굴 애니메이션을 위한 마크업이 추가된 텍스트를 생성한다.
• 모듈러한 구성 요소와 정의된 인터페이스를 활용해 진화하는 기술의 즉각적 통합을 지원한다.
• 타이밍 헤드의 데이비드 버니를 영감으로 삼은 캐릭터 기반 접근 방식을 사용하여 성격을 중계 톤과 표현에 통합한다.
• 시스템은 확장 가능하도록 설계되어 있어, 향후 음성, 애니메이션, 또는 추론 모듈의 업그레이드가 전체 아키텍처를 재설계하지 않고도 가능하다.

실험 결과

연구 질문

• RQ1 실시간 축구 시뮬레이션에서 캐릭터의 성격과 정서 상태를 어떻게 모델링하여 중계 스타일에 영향을 줄 수 있는가?
• RQ2 게임 상태 데이터에서 표현적 음성과 얼굴 표정으로의 일관된 매핑을 가능하게 하는 메커니즘은 무엇인가?
• RQ3 표준화된 인터페이스는 다중 구성 요소 중계 시스템에서 모ularity와 향후 확장 가능성을 어떻게 지원하는가?
• RQ4 감정 모델링은 애니메이티드 중계의 현실감과 몰입감을 향상시키는 데 어떤 역할을 하는가?
• RQ5 사전 분석된 시뮬레이터 출력을 어떻게 효과적으로 감정적으로 일관된, 음성 합성에 적합한 텍스트와 애니메이션 캐릭터를 포함한 형태로 전환할 수 있는가?

주요 결과

• 시스템은 성격 기반 감정 모델을 활용해 로보컵 시뮬레이터 상태를 감정적으로 표현적인 중계로 성공적으로 매핑하였다.
• 표준화된 인터페이스의 사용은 음성 및 애니메이션 구성 요소의 모듈러한 통합을 가능하게 하여 향후 업그레이드를 지원한다.
• 시스템은 음성 합성과 얼굴 애니메이션에 적합한 마크업이 추가된 텍스트를 생성하여 출력의 동기화를 보장한다.
• Byrne는 일관된 감정 톤과 게임 내 이벤트에 대한 동적 반응성을 갖춘 애니메이티드 중계자 구현의 가능성을 입증하였다.
• 아키텍처는 확장 가능성을 지원하여 개별 구성 요소의 교체나 향상이 전체 시스템을 재설계하지 않고도 가능하다.
• 이 접근법은 시뮬레이션된 스포츠 환경에서 감정지능 기반의 캐릭터 기반 중계 시스템을 위한 기반을 마련한다.