AI 휴먼(AI Human) 기술 기업 클레온이 음성만으로 감정 변화에 따른 얼굴 표정을 실시간으로 생성하는 기술을 개발하고, 이를 컴퓨터비전 분야의 권위 있는 학회인 BMVC(British Machine Vision Conference) 2026에 게재했습니다. 이는 올해 ICLR, CVPR에 이은 세 번째 국제 AI 학회 발표로, AI가 단순히 말을 넘어 감정까지 표현하며 인간과 더욱 자연스럽게 상호작용할 수 있는 길을 열었습니다.
이번 BMVC 논문 'Emo-LiveSync'는 기존 AI 영상 기술이 음성에 맞춰 입 모양만 움직이던 한계를 넘어, 기쁨, 슬픔, 화남 등 감정의 종류와 강도, 변화까지 얼굴 표정에 반영하는 것이 핵심입니다. 클레온은 입 모양과 감정 표현을 하나의 생성 구조로 통합 처리하여 실제 사람뿐 아니라 애니메이션, 3D 캐릭터에도 적용 가능하다고 설명했습니다. 앞서 발표된 CVPR 2026 논문에서는 음성만으로 손짓과 몸동작을 생성하는 전신 대화형 아바타 기술을, ICLR 2026 논문에서는 옷자락처럼 신체 움직임에 따라 흔들리는 세부 움직임을 표현하는 기술을 다루는 등, 클레온은 AI 휴먼의 사실적인 표현력을 높이는 데 집중해왔습니다. 이 연구들은 고려대학교 박경문 교수 연구실과의 공동연구로 진행되었습니다.
클레온은 이러한 개별 기술들을 하나의 실시간 시스템으로 통합하여 기업 교육, 디지털 사이니지, 리테일, 전시 및 행사 현장 등 다양한 산업 분야에 적용하고 있습니다. 기업용 대화형 AI 에이전트 구축 솔루션 '롤핏(Rollfit)', 디지털 휴먼 개발 도구 '클레온 스튜디오 SDK(CLEON Studio SDK)'를 운영 중이며, 다국어 AI 프로모터 솔루션 '이벤트 프로모터 OS(Event Promoter OS)'도 출시를 앞두고 있습니다. 강지수 클레온 CTO는 AI가 사람과 자연스럽게 상호작용하려면 질문 이해와 답변 생성뿐 아니라, 자연스러운 표정과 몸짓으로 감정을 표현하는 능력이 필수적이라고 강조하며, 앞으로도 AI 인터페이스의 고도화를 통해 인간과 AI의 소통을 더욱 원활하게 만들겠다고 밝혔습니다. 이 기술 발전은 AI 휴먼이 단순 정보 전달자를 넘어, 감성적인 교류가 필요한 영역까지 확장될 수 있음을 시사합니다.