Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Intentional Gesture: Deliver Your Intentions with Gestures for Speech

Created by
  • Haebom

저자

Pinxin Liu, Haiyang Liu, Luchuan Song, Jason J. Corso, Chenliang Xu

개요

본 논문은 인간의 의사소통 의도를 이해하고 활용하여 의미 있는 제스처를 생성하는 새로운 프레임워크인 Intentional-Gesture를 소개한다. 기존 방법론이 얕은 언어적 단서에 의존하는 문제를 해결하기 위해, 고수준 의사소통 기능을 기반으로 제스처 생성을 의도 추론 작업으로 간주한다. InG 데이터셋을 구축하여 제스처-의도 주석을 추가하고, Intentional Gesture Motion Tokenizer를 개발하여 의도 인식 제스처 합성을 가능하게 함으로써 BEAT-2 벤치마크에서 새로운 성능을 달성했다.

시사점, 한계점

시사점:
고수준 의사소통 기능을 기반으로 한 의도 기반 제스처 생성 프레임워크 제시.
BEAT-2 데이터셋에 제스처-의도 주석을 추가한 InG 데이터셋 구축.
의도 인식을 위한 새로운 모션 토크나이저 개발.
BEAT-2 벤치마크에서 최첨단 성능 달성.
디지털 휴먼 및 구체화된 AI의 표현력 있는 제스처 생성에 기여.
한계점:
논문 내에서 구체적인 한계점에 대한 언급은 없음.
👍