[논문 리뷰] Building and displaying name relations using automatic unsupervised analysis of newspaper articles

Bruno Pouliquen, Ralf Steinberger외 2명|ArXiv.org|2006. 09. 12.

Geographic Information Systems Studies참고 문헌 6인용 수 6

한 줄 요약

이 논문은 다국어 뉴스 기사에서 자동명사물인식과 통계적 동시출현 분석을 사용하여 사람 간 관계를 추출하고 시각화하는 비지도 학습 방법을 제시한다. 매일 15개 언어에서 약 15,000건의 기사를 처리함으로써 지식 기반을 구축하며, NewsExplorer 애플리케이션을 통해 지도 및 사람별 페이지를 통한 상호작용 가능한 관계 네트워크 탐색을 가능하게 한다. 수동 레이블링 없이도 확장 가능하고 다국어 기반의 관계 추출이 가능하다는 점을 입증한다.

ABSTRACT

We present a tool that, from automatically recognised names, tries to infer inter-person relations in order to present associated people on maps. Based on an in-house Named Entity Recognition tool, applied on clusters of an average of 15,000 news articles per day, in 15 different languages, we build a knowledge base that allows extracting statistical co-occurrences of persons and visualising them on a per-person page or in various graphs.

연구 동기 및 목표

• 수동 레이블링 없이 대규모 뉴스 코퍼스에서 사람 간 관계를 자동으로 추론하는 것.
• 매일 15개 언어에서 15,000건의 기사를 처리할 수 있는 확장 가능하고 다국어 기반의 시스템을 개발하는 것.
• 지도 및 상호작용 웹 페이지를 통해 감지된 사람 간 관계를 지도와 그래픽적 표현으로 시각화하는 것.
• 비지도 기법을 사용하여 다국어 정보 검색 및 지식 기반 구축을 지원하는 것.

제안 방법

• 신문 기사에서 사람 이름을 추출하기 위해 내부 개발한 명사물인식(NER) 시스템을 활용한다.
• 공통된 언급 맥락을 기반으로 잠재적인 사람 간 관계를 식별하기 위해 비지도 통계적 동시출현 분석을 적용한다.
• 하루에 약 15,000건의 기사 클러스터를 처리하여 15개 언어 전반에 걸쳐 동시출현 빈도를 집계한다.
• 동시출현 통계에서 유도된 지식 기반을 구축하여 개인 간 관계 네트워크를 표현한다.
• 인터랙티브 웹 인터페이스를 통해 결과를 시각화하며, 개인별 페이지 및 그래픽 표현을 포함한다.
• 다국어 환경에서 감지된 관계를 탐색할 수 있도록 NewsExplorer 온라인 애플리케이션을 활용한다.

실험 결과

연구 질문

• RQ1 비지도 방법을 사용하여 다국어 뉴스 기사의 대규모 볼륨에서 사람 간 관계를 어떻게 자동으로 추론할 수 있는가?
• RQ2 다양한 언어에서 의미 있는 사람 간 관계를 탐지하는 데 있어 비지도 동시출현 분석의 확장성과 내구성은 어떠한가?
• RQ3 다국어 환경에서 상호작용 가능한 탐색을 위해 감지된 관계 네트워크를 효과적으로 어떻게 시각화할 수 있는가?
• RQ4 비지도 NER와 동시출현 패tern이 관계 지식 기반 구축에서 수동 레이블링을 얼마나 대체할 수 있는가?

주요 결과

• 비지도 기법을 사용하여 매일 15개 언어에서 약 15,000건의 뉴스 기사를 성공적으로 처리한다.
• 명사물의 동시출현 패턴이 수동 레이블링 없이도 의미 있는 사람 간 관계를 도출한다.
• 유도된 지식 기반을 통해 지도 및 그래픽 인터페이스에서 사람 간 관계를 상호작용적으로 시각화할 수 있다.
• 이 방법은 이전의 NER 연구(cs.CL/0609051)를 바탕으로 하며, 관계 지식 추출으로 확장된다.
• 시스템은 다국어 기반의 NewsExplorer 애플리케이션에 통합되어 감지된 관계를 실시간으로 탐색할 수 있도록 한다.
• 이 방법은 뉴스 미디어에서 대규모, 다국어, 비지도 관계 추출의 가능성을 입증한다.