Abstract

디지털 기술의 발전으로 메타버스에 대한 수요가 급증하면서 디지털 휴먼 생성 기술에 대한 관심이 높아지고 있다. 이러한 기술의 최근 발전은 디지털 휴먼의 외형, 표정, 행동, 음성 등을 더욱 실재감 있게 만드는 것에 초점을 두었으며, 사람과 구별하기 힘든 수준까지 구현하는데 성공하였다. 그러나 디지털 휴먼이 보다 사람처럼 작동하기 위해서는 사람과 같이 상호작용(interaction)하는 기술에 대한 연구가 필요하며, 특히 감성적 정보에 대한 고려가 필요하다. 본 연구에서는 디지털 휴먼이 인간의 수많은 감성 상호작용 중 하나인 ‘공감’을 표현하기 위한 방법에 대해 다룬다. 공감의 감성 전염(Emotion Contagion)을 기반으로 시스템의 전체 프로세스를 구성하였으며, 사용자의 감성 상태를 인식하기 위해 표정 인식 기술을 활용하였다. 표정 인식 기술은 딥러닝(CNN) 모델을 학습시켜 구현하였으며, 감성 표현을 위해 디지털 휴먼의 표정을 Action Unit(AU) 기반으로 생성하였다. 또한 눈 맞춤(eye contact) 효과를 증강하기 위해 눈 반사(eye reflection) 영상을 적용하였다. 본 연구는 디지털 휴먼에 감성(특히 공감)을 부여하기 위한 새로운 시도이며, 공감형 디지털 휴먼 개발을 위한 기초 연구로써 활용될 수 있을 것으로 기대된다.

Keywords

디지털 휴먼, 공감, 감성 전염, 표정 인식, 눈 맞춤, 눈 반사

Reference

윤대호, 김경빈, 목수빈, 조아영, 황민철 (2023). 디지털 휴먼의 공감 표현 연구. 한국감성과학회 춘계 학술대회