[논문 리뷰] Web Video in Numbers - An Analysis of Web-Video Metadata

Luca Rossetto, Heiko Schuldt|arXiv (Cornell University)|2017. 07. 05.

Advanced Image and Video Retrieval Techniques참고 문헌 19인용 수 5

한 줄 요약

이 논문은 2016년에 유튜브와 비imeo에서 수집한 1,200만 건이 넘는 웹 영상의 메타데이터를 분석하여, 기존 영상 데이터셋과 실제 웹 영상 간의 지속적인 격차를 드러낸다. 이 격차는 영상의 지속 시간, 해상도, 업로드 빈도, 라이선스 유형 등에서 두드러지며, 일반적으로 사용되는 영상 컬렉션들이 현재의 웹 영상 트렌드를 대표하지 못함을 입증한다. 본 연구는 향후 다중미디어 연구의 대표성을 향상시키기 위해 공개 가능한 대규모 메타데이터 데이터셋을 제공한다.

ABSTRACT

Web video is often used as a source of data in various fields of study. While specialized subsets of web video, mainly earmarked for dedicated purposes, are often analyzed in detail, there is little information available about the properties of web video as a whole. In this paper we present insights gained from the analysis of the metadata associated with more than 120 million videos harvested from two popular web video platforms, vimeo and YouTube, in 2016 and compare their properties with the ones found in commonly used video collections. This comparison has revealed that existing collections do not (or no longer) properly reflect the properties of web video "in the wild".

연구 동기 및 목표

• 실제 웹 환경에서 관찰되는 영상의 진정한 특성, 즉 '자연계의 영상'을 반영하는 데 있어 기존 영상 컬렉션의 대표성 평가.
• 주요 영상 플랫폼과 일반적으로 사용되는 영상 데이터셋 간의 메타데이터 속성(예: 지속 시간, 해상도, 업로드 빈도, 라이선스 유형 등)의 핵심 차이점 규명.
• 다양한 영상 컬렉션의 대표성을 향상시키기 위해 유튜브와 비imeo에서 확보한 대규모 공개 메타데이터 데이터셋 제공.
• 수집 과정에서 발생하는 편향, 라이선스 제약, 오래된 콘텐츠 등으로 인해 기존 영상 컬렉션의 한계를 규명.
• 웹 영상이 해상도, 지속 시간, 화면 비율, 업로드 빈도 측면에서 급속도로 변화하고 있음을 입증하여, 현재의 데이터셋이 점점 더 오래된 상태가 됨을 보여줌.

제안 방법

• 2016년 4월부터 7월까지 유튜브와 비imeo에서 영상 메타데이터를 수집하기 위해 자바로 작성된 분산형 커스터마이징 웹 크롤러 사용.
• HTTP 요청 및 HTML 파싱을 위해 jsoup를 활용하여 제목, 설명, 지속 시간, 해상도, 업로드 일자, 라이선스, 태그 등 메타데이터 추출.
• 1억 건의 유튜브 영상과 2,000만 건의 비imeo 영상에서 메타데이터를 확보하여 2005년부터 2016년까지의 콘텐츠를 포함.
• 수집된 데이터는 PostgreSQL 데이터베이스 백업으로 저장되었으며, 전용 다운로드 서버를 통해 공개됨.
• 기존의 표준 영상 컬렉션(예: CC_WEB_VIDEO, MCG-WEBV, IACC, 플리커 기반 데이터셋 등)과 플랫폼별 메타데이터 분포를 비교 분석.
• 주요 메타데이터 차원(영상 지속 시간, 해상도, 업로드 빈도, 언어 분포, 라이선스 유형 등)에 대해 통계적 비교 수행.

실험 결과

연구 질문

• RQ1 2016년 유튜브와 비imeo의 웹 영상 메타데이터 속성은 일반적으로 사용되는 영상 컬렉션과 어떻게 비교되는가?
• RQ2 기존 영상 데이터셋이 영상 지속 시간, 해상도, 업로드 빈도 측면에서 실제 웹 영상의 특성을 얼마나 잘 반영하고 있는가?
• RQ3 주요 영상 플랫폼과 표준 데이터셋 간의 영상 라이선스, 언어 사용, 태그 분포의 차이는 무엇인가?
• RQ4 2005년부터 2016년까지 주요 플랫폼에서 영상의 특성(해상도, 화면 비율, 업로드 빈도 등)은 어떻게 변화했는가?
• RQ5 플랫폼 고유의 기능과 컬렉션 정책이 기존 영상 컬렉션의 구성에 얼마나 큰 영향을 미치는가?

주요 결과

• 기존 영상 컬렉션(예: IACC, CC_WEB_VIDEO)은 실제 웹 영상과 비교해 지속 시간과 해상도 다양성 측면에서 대표성이 떨어짐을 확인함.
• 유튜브와 비imeo 영상의 지속 시간 범위는 플리커나 인터넷 아카이브에서 확보된 컬렉션보다 훨씬 넓으며, 업로드 빈도도 높음.
• 유튜브와 비imeo의 영상 해상도는 시간이 지남에 따라 증가했으며, 점점 더 넓은 화면 비율로 이동하는 추세를 보여, 시네마틱한 형식과 스마트폰 친화적 형식으로의 전환을 시사함.
• 두 플랫폼의 웹 영상 업로드 빈도는 2005년에서 2016년 사이에 명확한 상승 추세를 보이며, 웹상의 영상 콘텐츠 총량 증가를 가속화함.
• 유튜브와 비imeo에서의 크리에이티브 커먼즈 라이선스 영상는 지속 시간과 업로드 빈도에서 뚜렷한 패턴을 보이며, 라이선스 유형 간 콘텐츠 제작 행동의 차이를 시사함.
• 모든 플랫폼에서 영상 제목과 설명에서 영어가 지배적인 언어였지만, 보조 및 제3언어의 분포는 플랫폼과 데이터셋 간에 상당한 격차를 보임.