[논문 리뷰] Clinical TempEval

Steven Bethard, Leon Derczynski외 2명|arXiv (Cornell University)|2014. 03. 19.

Topic Modeling참고 문헌 8인용 수 6

한 줄 요약

이 논문은 SemEval-2015의 임상 TempEval 과제를 소개하며, 임상 텍스트 내 이벤트, 시간 및 그들의 시간적 관계를 식별하고 분류하는 데 초점을 맞춘다. 이 프레임워크는 여섯 개의 하위과제를 포함한다: 시간적 및 이벤트 언급 식별, 그들의 속성 기술, 이벤트-문서 생성 시점 간 관계 식별, 그리고 서사 컨테이너 구조 탐지.

ABSTRACT

We describe the Clinical TempEval task which is currently in preparation for the SemEval-2015 evaluation exercise. This task involves identifying and describing events, times and the relations between them in clinical text. Six discrete subtasks are included, focusing on recognising mentions of times and events, describing those mentions for both entity types, identifying the relation between an event and the document creation time, and identifying narrative container relations.

연구 동기 및 목표

• 임상 텍스트에서 시간적 관계 추출을 위한 표준화된 평가 프레임워크를 개발하기 위해.
• 전자 건강 기록 내 이벤트 및 시간 표현을 식별하고 분류하는 데 도전하는 데 위해.
• 임상 이벤트와 문서 생성 시간 간의 관계 인식을 지원하기 위해.
• 임상 노트 내 시간적 순서를 구조화하는 데 도움이 되는 서사 컨테이너 관계를 모델링하기 위해.
• 임상 시간 정보 처리 분야의 연구 발전을 지원하기 위한 공동 과제를 제공하기 위해.

제안 방법

• 과제는 임상 텍스트 내 시간적 및 이벤트 인식을 체계적으로 평가하기 위해 여섯 개의 독립된 하위과제를 정의한다.
• 임상 내역 내 이벤트 및 시간 언급을 식별하기 위해 표준화된 주석 지침을 사용한다.
• 이벤트 및 시간 언급의 의미적 및 시간적 속성 기반으로 분류를 포함한다.
• 시간 순서 히وري스틱을 사용하여 이벤트와 문서 생성 시간 간의 관계를 식별한다.
• 시간적 순서의 계층적 구조를 모델링하기 위해 서사 컨테이너 관계를 탐지한다.
• SemEval-2015의 공동 평가 활동으로 설계되어 시스템 간 벤치마킹을 가능하게 한다.

실험 결과

연구 질문

• RQ1 시스템은 임상 텍스트 내 이벤트 및 시간 표현을 얼마나 정확하게 식별하고 분류할 수 있는가?
• RQ2 시스템은 임상 이벤트와 문서 생성 시간 간의 시간적 관계를 결정하는 데 얼마나 잘 성능을 내는가?
• RQ3 시스템은 시간적 순서를 조직화하는 서사 컨테이너 구조를 얼마나 잘 탐지할 수 있는가?
• RQ4 다양한 형태의 임상 노트 형식에서 시간적 관계를 인식하는 데의 과제는 무엇인가?
• RQ5 다른 주석 지침은 임상 시간 평가의 일관성과 성능에 어떤 영향을 미치는가?

주요 결과

• 임상 TempEval 과제는 임상 텍스트 내 시간적 관계 추출을 평가하기 위한 종합적인 프레임워크를 제공한다.
• 과제는 시간적 및 이벤트 인식에 대한 세분화된 평가를 가능하게 하는 여섯 개의 별도된 하위과제를 포함한다.
• 이벤트, 시간 및 그들의 관계를 식별하는 데 일관성을 확보하기 위해 표준화된 주석 지침이 개발되었다.
• 과제는 임상 시간 분석에서 핵심 과제인 이벤트와 문서 생성 시간 간의 관계 평가를 지원한다.
• 과제는 임상 내역 내 시간적 구조를 모델링하기 위해 서사 컨테이너 관계를 공식화하였다.
• 과제는 SemEval-2015의 공동 평가 활동으로 설계되어 공동체 수준의 벤치마킹을 촉진한다.