[논문 리뷰] ODverse33: Is the New YOLO Version Always Better? A Multi Domain benchmark from YOLO v5 to v11

Tianyou Jiang, Yang Zhong|ArXiv.org|2025. 02. 20.

Scientific Computing and Data Management인용 수 5

한 줄 요약

본 논문은 교차 버전, 다중 도메인 벤치마크(ODverse33)를 구성하여 YOLOv5부터 YOLOv11까지를 비교하고, 최신 버전이 다양한 도메인에 걸쳐 계보를 이은 선행 버전을 일관되게 능가하는지 평가합니다.

ABSTRACT

You Look Only Once (YOLO) models have been widely used for building real-time object detectors across various domains. With the increasing frequency of new YOLO versions being released, key questions arise. Are the newer versions always better than their previous versions? What are the core innovations in each YOLO version and how do these changes translate into real-world performance gains? In this paper, we summarize the key innovations from YOLOv1 to YOLOv11, introduce a comprehensive benchmark called ODverse33, which includes 33 datasets spanning 11 diverse domains (Autonomous driving, Agricultural, Underwater, Medical, Videogame, Industrial, Aerial, Wildlife, Retail, Microscopic, and Security), and explore the practical impact of model improvements in real-world, multi-domain applications through extensive experimental results. We hope this study can provide some guidance to the extensive users of object detection models and give some references for future real-time object detector development.

연구 동기 및 목표

• 다양한 실제 도메인에서 최신 YOLO 버전이 이전 버전을 일관되게 능가하는지에 대한 질문을 제기합니다.
• YOLO 모델 v5에서 v11까지를 포괄하는 종합적 다중 도메인 벤치마크로 ODverse33를 소개합니다.
• YOLO 혁신의 실용적 성능 향상을 분석하기 위한 실험 프레임워크와 데이터셋을 제공합니다.
• 실시간 물체 인식 작업에서 YOLO 버전 선택에 대한 연구자와 실무자를 위한 지침을 제공합니다.

제안 방법

• YOLOv1부터 YOLOv11까지의 주요 혁신을 검토하고 요약합니다.
• 11개 도메리에 걸친 33개의 데이터셋으로 구성된 ODverse33 벤치마크를 구축합니다.
• YOLO 개선의 실세계 영향을 이해하기 위해 모델-도메인 성능을 평가합니다.
• 여러 도메인에 걸쳐 YOLO v5부터 v11까지를 비교하기 위한 광범위한 실험을 수행합니다.
• 실시간 시스템에서 탐지 효과에 대한 아키텍처 변화의 실용적 함의를 분석합니다.

실험 결과

연구 질문

• RQ1 다양한 도메인에서 최신 YOLO 버전이 이전 버전을 일관되게 능가합니까?
• RQ2 각 YOLO 버전의 핵심 혁신이 실세계 이득이나 트레이드오프로 어떻게 전환되나요?
• RQ3 자율주행, 농업, 수중, 의학, 및 기타 도메인에서 YOLO 성능은 어떻게 다릅니까?
• RQ4 다도메인, 실시간 응용에서 YOLO 버전 선택에 대한 가이던스는 무엇입니까?

주요 결과

• 새로운 YOLO 버전이 모든 도메인에서 이전 버전을 보편적으로 지배하지는 않습니다.
• 33개 데이터셋, 다도메인 벤치마크는 도메인 의존적 성능 향상과 트레이드오프를 보여줍니다.
• 신버전의 혁신은 도메인 특성과 데이터셋의 구체성에 따라 다르게 향상됩니다.
• ODverse33은 단일 데이터셋 벤치마크를 넘어 YOLO 버전을 비교할 수 있는 구조화된 프레임워크를 제공합니다.
• 본 연구는 이질적 환경에서 실시간 탐지기를 배치하기 위한 실용적 통찰을 제공합니다.