Sign In

Mirror, Mirror on the Wall: Can VLM Agents Tell Who They Are at All?

μž‘μ„±μž
  • Haebom
μΉ΄ν…Œκ³ λ¦¬
Empty

μ €μž

Filippo Ziliotto, Ciro Beneduce, Bruno Lepri, Luciano Serafini, Massimiliano Luca, Tommaso Campari

πŸ’‘ κ°œμš”

λ³Έ μ—°κ΅¬λŠ” μΈκ°„μ˜ 자기 인식 λŠ₯λ ₯을 λͺ¨λ°©ν•˜μ—¬, μ‹œκ°-μ–Έμ–΄ λͺ¨λΈ(VLM) μ—μ΄μ „νŠΈκ°€ 거울 속 μžμ‹ μ˜ λͺ¨μŠ΅μ„ 인식할 수 μžˆλŠ”μ§€ νƒκ΅¬ν•©λ‹ˆλ‹€. 이λ₯Ό μœ„ν•΄ 3D ν™˜κ²½μ—μ„œ VLM μ—μ΄μ „νŠΈκ°€ 거울 속 λ°˜μ‚¬λ₯Ό 톡해 μžμ‹ μ˜ 속성을 νŒŒμ•…ν•˜κ³  λ‹€λ₯Έ λŒ€μƒκ³Ό ν˜Όλ™ν•˜μ§€ μ•Šλ„λ‘ ν•˜λŠ” 벀치마크λ₯Ό μ œμ•ˆν–ˆμŠ΅λ‹ˆλ‹€. μ‹€ν—˜ κ²°κ³Ό, 더 κ°•λ ₯ν•œ VLM λͺ¨λΈμ—μ„œ 거울 기반 자기 인식이 λ‚˜νƒ€λ‚¬μœΌλ©°, μ΄λŠ” λ°˜μ‚¬λœ 정보λ₯Ό 행동에 ν™œμš©ν•˜λŠ” λŠ₯λ ₯κ³Ό μ—°κ΄€λ˜μ–΄ μžˆμŒμ„ λ³΄μ—¬μ€λ‹ˆλ‹€.

πŸ”‘ μ‹œμ‚¬μ  및 ν•œκ³„

β€’
VLM μ—μ΄μ „νŠΈμ˜ 자기 인식 λŠ₯λ ₯은 λͺ¨λΈμ˜ μ„±λŠ₯κ³Ό 직접적인 관련이 μžˆμŒμ„ μž…μ¦ν•©λ‹ˆλ‹€.
β€’
거울 기반 ν‰κ°€λŠ” VLM의 μ§„μ •ν•œ 자기 인식 λŠ₯λ ₯이 ν”„λ‘¬ν”„νŠΈλ‚˜ 사전 지식에 μ˜μ‘΄ν•˜λŠ” 것이 μ•„λ‹ˆλΌ, 인지 및 행동에 κΈ°λ°˜ν•¨μ„ μ§„λ‹¨ν•˜λŠ” 효과적인 λ°©λ²•μž„μ„ μ œμ‹œν•©λ‹ˆλ‹€.
β€’
거울 기반 자기 인식이 λͺ¨λ“  VLM λͺ¨λΈμ—μ„œ μΌκ΄€λ˜κ²Œ λ‚˜νƒ€λ‚˜μ§€λŠ” μ•ŠμœΌλ©°, ν–₯ν›„ λ‹€μ–‘ν•œ ν™˜κ²½κ³Ό λ³΅μž‘ν•œ μ‹œλ‚˜λ¦¬μ˜€μ—μ„œμ˜ 좔가적인 연ꡬ가 ν•„μš”ν•©λ‹ˆλ‹€.
πŸ‘
Made with Slashpage