[논문 리뷰] EviAgent: Evidence-Driven Agent for Radiology Report Generation
EviAgent는 계획–ReAct–증거 추출 파이프라인을 통해 명시적 시각적 증거와 회수된 지식에 기반하여 방사선 보고서를 구체화하고, MIMIC-CXR, CheXpert Plus, 및 IU-Xray에서 일반 모델과 전문 모델 모두를 능가합니다. 온프레미스에서 오픈 소스 백본으로 실행됩니다.
Automated radiology report generation holds immense potential to alleviate the heavy workload of radiologists. Despite the formidable vision-language capabilities of recent Multimodal Large Language Models (MLLMs), their clinical deployment is severely constrained by inherent limitations: their "black-box" decision-making renders the generated reports untraceable due to the lack of explicit visual evidence to support the diagnosis, and they struggle to access external domain knowledge. To address these challenges, we propose the Evidence-driven Radiology Report Generation Agent (EviAgent). Unlike opaque end-to-end paradigms, EviAgent coordinates a transparent reasoning trajectory by breaking down the complex generation process into granular operational units. We integrate multi-dimensional visual experts and retrieval mechanisms as external support modules, endowing the system with explicit visual evidence and high-quality clinical priors. Extensive experiments on MIMIC-CXR, CheXpert Plus, and IU-Xray datasets demonstrate that EviAgent outperforms both large-scale generalist models and specialized medical models, providing a robust and trustworthy solution for automated radiology report generation.
연구 동기 및 목표
- End-to-end 방사선 보고서 생성에서 명시적 시각 증거 및 외부 지식의 부족 문제를 해결한다.
- 결론을 시각적 소견에 근거하게 하는 투명하고 증거 기반의 에이전트 프레임워크를 제안한다.
- 오픈 소스 백본을 사용하여 온-premise, 프라이버시를 보호하는 작동을 가능하게 한다.
제안 방법
- 태스크를 세분화된 단위로 분해하는 Plan-Act-Report 패러다임.
- perception 도구 및 검색 모듈을 동적으로 호출하는 Tool-augmented ReAct 루프.
- 도구 출력으로부터 검증 가능한 증거 사슬 E를 구축하는 증거 추출.
- 외부 임상 선행 지식을 제공하는 검색 기반 지식 베이스.
- Fine-tuning 없이 도구를 쉽게 통합할 수 있도록 Model Context Protocol로 확장 가능.
실험 결과
연구 질문
- RQ1명시적 시각 증거 및 외부 지식에 기반한 방사선 보고서를 증거 기반 에이전트가 구체화할 수 있는가?
- RQ2다중 전문가 도구 협업이 엔드-투-엔드 MLLM보다 임상 정확성과 추적 가능성을 향상시키는가?
- RQ3계획 및 증거 추출이 보고서 품질에 어떤 영향을 미치는가?
- RQ4회수 기반 지식이 임상 내용 및 언어적 품질에 어떤 영향을 주는가?
주요 결과
- EviAgent는 세 가지 데이터셋에서 대부분의 지표에서 최상의 성능을 달성하며, 특히 RaTE, Semb, RadCliQ -1에서 두드러진다.
- MIMIC-CXR에서 EviAgent는 RaTE에서 GPT-5.1을 능가하고 Semb에서 Lingshu-7B를 능가하며; IU-Xray에서 RadCliQ -1은 110.2에 도달한다.
- 분류, 위치화 또는 검색 중 하나를 제거해도 성능이 저하되며, 특히 계획 및 증거 추출이 큰 영향을 미친다.
- 정성적 분석은 진단 정밀도와 추론 엔진보다 지각 모듈에 귀속되는 오류의 추적 가능성이 향상되었음을 보여준다.
이 논문 읽기
누빈트 뷰어에서 원문을 열고, 읽으면서 궁금한 곳을 바로 물어보세요.
누빈트에서 이 논문 읽기이 리뷰는 AI가 논문 원문을 바탕으로 만들었습니다. 인용하기 전에 원문을 확인해 주세요.