Sign In

Towards Reducible Uncertainty Modeling for Reliable Large Language Model Agents

Created by
  • Haebom
Category
Empty

μ €μž

Changdae Oh, Seongheon Park, To Eun Kim, Jiatong Li, Wendi Li, Samuel Yeh, Xuefeng Du, Hamed Hassani, Paul Bogdan, Dawn Song, Sharon Li

πŸ’‘ κ°œμš”

κΈ°μ‘΄ λŒ€κ·œλͺ¨ μ–Έμ–΄ λͺ¨λΈ(LLM)의 λΆˆν™•μ‹€μ„± μ •λŸ‰ν™”(UQ) 연ꡬ가 단일 질문-응닡 μ‹œλ‚˜λ¦¬μ˜€μ— μ§‘μ€‘λœ ν•œκ³„λ₯Ό μ§€μ ν•˜λ©°, λ³΅μž‘ν•œ μƒν˜Έμž‘μš©μ΄ ν•„μˆ˜μ μΈ LLM μ—μ΄μ „νŠΈ ν™˜κ²½μ— μ ν•©ν•œ μƒˆλ‘œμš΄ UQ ν”„λ ˆμž„μ›Œν¬μ˜ ν•„μš”μ„±μ„ μ œκΈ°ν•©λ‹ˆλ‹€. λ³Έ 논문은 μ—μ΄μ „νŠΈ UQλ₯Ό μœ„ν•œ 졜초의 일반적인 정립을 μ œμ‹œν•˜κ³ , 기쑴의 λΆˆν™•μ‹€μ„± 좕적 방식이 μƒν˜Έμž‘μš© μ—μ΄μ „νŠΈμ—λŠ” 뢀적합함을 λ³΄μž…λ‹ˆλ‹€. λŒ€μ‹ , μ—μ΄μ „νŠΈ ꢀ적 μ „λ°˜μ— 걸쳐 "μƒν˜Έμž‘μš©μ„±"을 κ°•μ‘°ν•˜λ©° 쑰건뢀 λΆˆν™•μ‹€μ„± κ°μ†Œ 과정을 μ œμ•ˆν•©λ‹ˆλ‹€.

πŸ”‘ μ‹œμ‚¬μ  및 ν•œκ³„

β€’
LLM μ—μ΄μ „νŠΈμ˜ μ‹ λ’°μ„± 확보λ₯Ό μœ„ν•΄ λΆˆν™•μ‹€μ„± μ •λŸ‰ν™” 연ꡬ가 단일 μ‹œλ‚˜λ¦¬μ˜€λ₯Ό λ„˜μ–΄ μƒν˜Έμž‘μš©μ μ΄κ³  개방적인 ν™˜κ²½μœΌλ‘œ ν™•μž₯λ˜μ–΄μ•Ό ν•©λ‹ˆλ‹€.
β€’
μƒν˜Έμž‘μš©μ„±μ˜ μ€‘μš”μ„±μ„ κ°•μ‘°ν•˜λŠ” "쑰건뢀 λΆˆν™•μ‹€μ„± κ°μ†Œ"λΌλŠ” μƒˆλ‘œμš΄ 관점은 LLM μ—μ΄μ „νŠΈμ˜ λΆˆν™•μ‹€μ„±μ„ 더 효과적으둜 λͺ¨λΈλ§ν•˜κ³  관리할 수 μžˆλŠ” κ°€λŠ₯성을 μ œμ‹œν•©λ‹ˆλ‹€.
β€’
λ³Έ μ—°κ΅¬μ—μ„œ μ œμ‹œλœ κ°œλ…μ  ν”„λ ˆμž„μ›Œν¬λŠ” LLM μ—μ΄μ „νŠΈ UQ 섀계에 λŒ€ν•œ μ‹€μ§ˆμ μΈ 지침을 μ œκ³΅ν•˜λ©°, μ΅œμ „μ„  LLM 개발 및 νŠΉμ • 도메인 μ‘μš© 뢄야에 μ€‘μš”ν•œ ν•¨μ˜λ₯Ό κ°€μ§‘λ‹ˆλ‹€.
β€’
μ œμ‹œλœ ν”„λ ˆμž„μ›Œν¬μ˜ μ‹€μ§ˆμ μΈ κ΅¬ν˜„ 및 검증, 그리고 μ—μ΄μ „νŠΈ ꢀ적 μ „λ°˜μ— 걸쳐 λΆˆν™•μ‹€μ„±μ„ λ”μš± μ •κ΅ν•˜κ²Œ κ΄€λ¦¬ν•˜κΈ° μœ„ν•œ 좔가적인 연ꡬ가 ν•„μš”ν•©λ‹ˆλ‹€.
πŸ‘