[논문 리뷰] Color: A Crucial Factor for Aesthetic Quality Assessment in a Subjective Dataset of Paintings

Seyed Ali Amirshahi, Gregor U. Hayn‐Leichsenring외 2명|arXiv (Cornell University)|2016. 09. 19.

Aesthetic Perception and Analysis참고 문헌 7인용 수 3

한 줄 요약

이 논문은 15세기에서 20세기까지의 서양 화가 36명의 작품으로 구성된 새로운 주관적 데이터셋을 소개하고, 미적 품질 평가에서 색상의 역할을 조사한다. 인지와 관련된 색상 특징을 기반으로 한 분류기로, 색상 특징과 주관적 미적 점수 간의 분류 정확도가 73%에 도달하여 색상이 계산적 미학에서 핵심적인 역할을 한다는 것을 입증한다.

ABSTRACT

Computational aesthetics is an emerging field of research which has attracted different research groups in the last few years. In this field, one of the main approaches to evaluate the aesthetic quality of paintings and photographs is a feature-based approach. Among the different features proposed to reach this goal, color plays an import role. In this paper, we introduce a novel dataset that consists of paintings of Western provenance from 36 well-known painters from the 15th to the 20th century. As a first step and to assess this dataset, using a classifier, we investigate the correlation between the subjective scores and two widely used features that are related to color perception and in different aesthetic quality assessment approaches. Results show a classification rate of up to 73% between the color features and the subjective scores.

연구 동기 및 목표

• 다양한 세기 동안 걸쳐 다양한 서양 회화를 포함하는 새로운 데이터셋을 개발하여 미적 품질 평가에 활용한다.
• 인간이 애너테이션한 데이터셋에서 색상 특징이 주관적 미적 판단과 관련이 있는지 조사한다.
• 기계 학습을 통해 색상 기반 특징이 미적 품질을 분류하는 데 얼마나 예측력이 있는지 평가한다.
• 인간이 미적 아름다움을 인식하는 데 영향을 주는 주요 시각적 요소를 규명함으로써 계산적 미학에 기여한다.

제안 방법

• 저자들은 15세기에서 20세기까지의 유명한 서양 화가 36명의 작품으로 구성된 데이터셋을 정리했다.
• 주관적 미적 점수는 인간 관찰자로부터 수집되어 평가의 기초가 되었다.
• 색상 분포와 조화와 관련된 것으로 보이는 두 가지 널리 사용되는 색상 인지 특징을 각 회화에서 추출했다.
• 이 색상 특징을 기반으로 주관적 미적 점수를 예측하기 위해 지도 학습 분류기를 훈련시켰다.
• 예측된 점수와 실제 미적 순위 간의 정확도 지표를 사용하여 분류 성능을 평가했다.
• 표준 기계 학습 파이프라인을 사용하여 색상 특징과 인간의 판단 간 상관관계를 평가했다.

실험 결과

연구 질문

• RQ1 색상 기반 특징이 그림의 인간 주관적 미적 판단을 얼마나 잘 예측할 수 있는가?
• RQ2 색상 특징만을 사용하여 높은 품질과 낮은 품질의 그림을 분류하는 분류기가 얼마나 잘 기능하는가?
• RQ3 색상 특징이 다른 시각적 특징에 비해 미적 품질 평가에서 더 중요한 영향을 미치는가?
• RQ4 색상 특징과 미적 점수 간 상관관계가 다양한 예술 스타일과 시대에 걸쳐도 유지되는가?

주요 결과

• 분류기는 색상 특징만을 기반으로 주관적 미적 점수를 예측할 때 최대 73%의 분류 정확도를 달성했다.
• 색상 특징은 인간이 애너테이션한 미적 판단과 강한 유의미한 상관관계를 보였다.
• 결과는 다른 시각적 특징을 무시할 때조차도 색상이 미적 품질 평가에서 핵심적인 요소임을 확인한다.
• 이 데이터셋은 다양한 예술 시대와 스타일에 걸쳐 일관된 성능을 보이며, 미적 연구에 대한 타당성을 뒷받침한다.
• 연구는 색상 인지 특징이 인간의 그림에 대한 미적 선호도를 효과적으로 모델링할 수 있음을 실증적으로 입증한다.
• 결과는 색상 기반 특징을 계산적 미학 모델의 핵심 구성 요소로 통합할 것을 지지한다.