UNIST 연구진, 음성 감정 인식해 표정 변환하는 AI 기술 개발

국내 연구진이 음성에 담긴 감정을 분석해 영상 속 화자의 표정을 자동으로 바꾸는 AI 기술 'C-MET'을 개발했다. 같은 문장이라도 어조에 따라 칭찬과 비아냥을 구분하고 입꼬리, 눈썹, 눈 주변 근육 움직임을 다르게 표현한다.

울산과학기술원(UNIST) 인공지능대학원 김태환 교수 연구진은 음성 신호에서 감정을 추출해 숫자 정보로 환산한 뒤 얼굴에 반영하는 방식으로 기술을 개발했다. 기존 기술과 달리 특정 감정에 이름표를 붙이지 않고 두 감정 사이의 적절한 위치를 판별하도록 설계했으며, 중국의 '이디톡' 기술 대비 정확도가 14%포인트 높은 것으로 나타났다.

이 기술은 교육용 아바타, AI 아나운서 생성, 영화·드라마 후반 작업, 뮤직비디오 제작 등 다양한 분야에 활용될 것으로 예상된다. 음성만으로 참조 이미지 없이 표정을 변환할 수 있다는 점이 기존 방식의 한계를 극복한 것으로 평가받고 있다.