Multi-modal 감정 인식 AI 모델 개발 - 연구결과(3)

SKT AI fellowship 3기 Cycling Hit 팀이 한국어 멀티모달 감정 인식 AI 모델 개발 연구 결과를 공유하는 포스팅입니다. 연구 초기에는 3가지 감정 클래스(부정, 중립, 긍정)를 다루었으나, 중간 발표 이후 인간의 기본 정서를 잘 나타내는 행복, 분노, 슬픔, 중립 4가지 클래스로 확장했습니다.

러셀 모델을 참고하여 각 감정 클래스의 분포를 분석하고, 트랜스포머 기반의 멀티모달 모델을 제안합니다. 이전 포스팅에서 연구 계획과 과정을 다루었으며, 이번 포스팅에서는 구체적인 모델링과 흥미로운 데모를 공개할 예정입니다.