[논문 리뷰] A Portrait of Emotion: Empowering Self-Expression through AI-Generated Art

Yoon Kyung Lee, Yong-Ha Park외 1명|arXiv (Cornell University)|2023. 04. 26.

Creativity in Education and Neuroscience인용 수 7

한 줄 요약

이 연구는 생성형 AI가 예술적 표현을 통해 인간의 정서적 의도를 어떻게 반영할 수 있는지 탐구하며, 세부적인 정서적 묘사를 통해 이미지 생성을 이끌어낸다. 결과적으로 정서적 서사 기반의 AI 생성 예술이 사건 기반 프롬프트보다 선호되지만, 스테레오타입에 과도하게 의존할 경우 정렬성과 미적 품질에 악영향을 미치므로, 정교한 지침을 통해 AI가 정서적 자아 표현을 향상시킬 수 있음을 시사한다.

ABSTRACT

We investigated the potential and limitations of generative artificial intelligence (AI) in reflecting the authors' cognitive processes through creative expression. The focus is on the AI-generated artwork's ability to understand human intent (alignment) and visually represent emotions based on criteria such as creativity, aesthetic, novelty, amusement, and depth. Results show a preference for images based on the descriptions of the authors' emotions over the main events. We also found that images that overrepresent specific elements or stereotypes negatively impact AI alignment. Our findings suggest that AI could facilitate creativity and the self-expression of emotions. Our research framework with generative AIs can help design AI-based interventions in related fields (e.g., mental health education, therapy, and counseling).

연구 동기 및 목표

• 생성형 AI가 예술적 산출물을 통해 창작자의 인지적 및 정서적 과정을 어떻게 반영할 수 있는지 조사하기 위해.
• 사용자 의도와 AI가 생성한 정서의 시각적 표현 간의 정렬 정도를 평가하기 위해.
• 정서적 묘사의 질이 이미지의 미적 품질, 독창성, 그리고 인식된 깊이에 어떤 영향을 미치는지 평가하기 위해.
• 스테레오타입의 과도한 표현이나 과도하게 강조된 시각적 요소 등으로 인해 정렬도가 떨어지는 등의 한계를 특정하기 위해.
• 정신 건강, 치료 및 정서 교육 분야에 AI 기반 간섭을 위한 연구 프레임워크를 개발하기 위해.

제안 방법

• 참가자들이 생성형 텍스트-이미지 디퓨전 모델을 안내하기 위해 개인적인 정서적 경험에 대한 세부적인 텍스트 묘사를 제공하였다.
• AI가 생성한 이미지는 정서적 의도와의 정렬도, 미적 품질, 독창성, 웃음감각, 정서적 깊이 기준으로 평가되었다.
• 정서적 서사 기반 프롬프트와 주요 사건 기반 묘사 간 비교 평가가 수행되었다.
• 선호도 및 의도된 정서와의 인지적 정렬도를 분석하기 위해 정성적 및 정량적 평가가 함께 사용되었다.
• 정서적 구체성과 스테레오타입적 시각적 신호의 영향을 분리하여 이미지 품질과 사용자 인식에 미치는 영향을 규명하기 위해 통제된 설계를 채택하였다.

실험 결과

연구 질문

• RQ1 사용자가 제공한 텍스트 묘사 기반으로 AI 생성 예술이 사용자의 정서적 의도를 얼마나 정확하게 반영할 수 있는가?
• RQ2 정서적 서사 기반 프롬프트와 사건 기반 묘사 간에 어떤 것이 더 정서적·미적으로 매력적인 이미지를 생성하는가?
• RQ3 시각적 스테레오타입이나 과도하게 강조된 요소가 사용자 의도와 AI 출력 간의 정렬도를 저하시키는 데 어떤 역할을 하는가?
• RQ4 사용자는 정서적 입력 기반으로 생성된 AI 예술의 독창성, 웃음감각, 깊이에 대해 어떻게 평가하는가?
• RQ5 정서적 자아 표현을 지원하기 위해 AI 생성 예술을 활용한 체계적 프레임워크는 치료적 또는 교육적 맥락에서 유용한가?

주요 결과

• 참가자들은 정서적 묘사 기반으로 생성된 AI 이미지가 사건 기반 프롬프트 기반 이미지보다 유의미하게 선호되었다.
• 정서적 묘사 기반으로 생성된 이미지는 정서적 깊이와 미적 품질 측면에서 더 높은 평가를 받았다.
• 특정 시각적 요소나 문화적 스테레오타입의 과도한 표현은 사용자가 의도한 정서와의 정렬도에 부정적인 영향을 미쳤다.
• 스테레오타입적 이미지의 존재는 생성된 예술 작품의 독창성과 진정성에 대한 인식을 떨어뜨렸다.
• 이 연구는 프롬프트가 정서적으로 풍부하고 맥락적으로 뉘앙스 있는 경우, AI가 정서적 자아 표현의 타당한 매체가 될 수 있음을 확인한다.
• 이 연구에서 제시한 프레임워크는 정신 건강 및 정서 교육 간섭에 AI 생성 예술을 통합할 잠재력을 보여준다.