Sign In

Efficient Emotion-Aware Iconic Gesture Prediction for Robot Co-Speech

μž‘μ„±μž
  • Haebom
μΉ΄ν…Œκ³ λ¦¬
Empty

μ €μž

Edwin C. Montiel-Vazquez, Christian Arzate Cruz, Stefanos Gkikas, Thomas Kassiotis, Giorgos Giannakakis, Randy Gomez

πŸ’‘ κ°œμš”

λ³Έ 논문은 λ‘œλ΄‡μ΄ μŒμ„± λ§₯락에 맞좰 감정 정보λ₯Ό ν™œμš©ν•˜μ—¬ 의미둠적으둜 μ€‘μš”ν•œ 뢀뢄에 제슀처λ₯Ό 효과적으둜 μƒμ„±ν•˜λŠ” κ²½λŸ‰ 트랜슀포머 λͺ¨λΈμ„ μ œμ•ˆν•©λ‹ˆλ‹€. 이 λͺ¨λΈμ€ ν…μŠ€νŠΈμ™€ 감정 μ •λ³΄λ§Œμ„ μ‚¬μš©ν•˜μ—¬ 제슀처의 μœ„μΉ˜μ™€ 강도λ₯Ό μ˜ˆμΈ‘ν•˜λ©°, μŒμ„± μž…λ ₯ 없이도 μ‹€μ‹œκ°„ λ‘œλ΄‡ μ œμ–΄μ— μ ν•©ν•©λ‹ˆλ‹€. μ œμ•ˆ λͺ¨λΈμ€ BEAT2 λ°μ΄ν„°μ…‹μ—μ„œ GPT-4o λͺ¨λΈλ³΄λ‹€ 의미둠적 제슀처 배치 λΆ„λ₯˜ 및 강도 νšŒκ·€ λͺ¨λ‘μ—μ„œ μš°μˆ˜ν•œ μ„±λŠ₯을 λ³΄μ˜€μŠ΅λ‹ˆλ‹€.

πŸ”‘ μ‹œμ‚¬μ  및 ν•œκ³„

β€’
λ‘œλ΄‡μ΄ μŒμ„± 없이도 감정과 ν…μŠ€νŠΈ μ •λ³΄λ§Œμ„ ν™œμš©ν•˜μ—¬ μΈκ°„μ²˜λŸΌ 의미둠적으둜 ν’λΆ€ν•œ μ½”-μŠ€ν”ΌμΉ˜ 제슀처λ₯Ό 생성할 수 μžˆμŒμ„ λ³΄μ—¬μ£Όμ—ˆμŠ΅λ‹ˆλ‹€.
β€’
μ œμ•ˆλœ κ²½λŸ‰ 트랜슀포머 λͺ¨λΈμ€ 계산 νš¨μœ¨μ„±μ΄ λ†’μ•„ μž„λ² λ””λ“œ μ—μ΄μ „νŠΈμ—μ„œμ˜ μ‹€μ‹œκ°„ 배포에 μ ν•©ν•©λ‹ˆλ‹€.
β€’
ν˜„μž¬ λͺ¨λΈμ€ BEAT2 데이터셋에 κ΅­ν•œλ˜μ–΄ 있으며, λ‹€μ–‘ν•œ 감정 ν‘œν˜„κ³Ό 문화적 λ§₯락을 κ³ λ €ν•œ μΌλ°˜ν™” μ„±λŠ₯ ν–₯상에 λŒ€ν•œ μΆ”κ°€ 연ꡬ가 ν•„μš”ν•©λ‹ˆλ‹€.
πŸ‘
Made with Slashpage