Sign In

Enhancing Trust in Large Language Models via Uncertainty-Calibrated Fine-Tuning

Created by
  • Haebom
Category
Empty

μ €μž

Ranganath Krishnan, Piyush Khanna, Omesh Tickoo

πŸ’‘ κ°œμš”

λŒ€κ·œλͺ¨ μ–Έμ–΄ λͺ¨λΈ(LLM)의 ν™˜κ° ν˜„μƒμ€ 신뒰성을 μ €ν•΄ν•˜λŠ” μ£Όμš” 문제둜, μ •ν™•ν•œ λΆˆν™•μ‹€μ„± 좔정이 ν•„μˆ˜μ μž…λ‹ˆλ‹€. λ³Έ 논문은 μ˜μ‚¬κ²°μ • 이둠에 κΈ°λ°˜ν•œ μƒˆλ‘œμš΄ λΆˆν™•μ‹€μ„± 인식 인과 μ–Έμ–΄ λͺ¨λΈλ§ 손싀 ν•¨μˆ˜λ₯Ό μ œμ•ˆν•˜μ—¬, LLM의 λΆˆν™•μ‹€μ„± μΆ”μ • 정확도λ₯Ό λ†’μ΄λ©΄μ„œλ„ μ‘λ‹΅μ˜ 신뒰성을 ν–₯μƒμ‹œν‚€λŠ” λ―Έμ„Έ μ‘°μ • 방법을 μ œμ‹œν•©λ‹ˆλ‹€. μ‹€ν—˜ κ²°κ³Ό, μ œμ•ˆλœ 방법이 κΈ°μ‘΄ 방식보닀 더 잘 λ³΄μ •λœ λΆˆν™•μ‹€μ„± μΆ”μ • κ²°κ³Όλ₯Ό λ„μΆœν•˜λ©°, ν™˜κ° 탐지 및 도메인 μ™Έ ν”„λ‘¬ν”„νŠΈ 식별 λŠ₯λ ₯을 크게 ν–₯μƒμ‹œν‚΄μ„ μž…μ¦ν•©λ‹ˆλ‹€.

πŸ”‘ μ‹œμ‚¬μ  및 ν•œκ³„

β€’
LLM의 ν™˜κ° ν˜„μƒ κ°μ†Œ 및 μ‹ λ’°μ„± ν–₯상을 μœ„ν•œ 효과적인 λΆˆν™•μ‹€μ„± 보정 λ―Έμ„Έ μ‘°μ • 방법둠을 μ œμ‹œν•©λ‹ˆλ‹€.
β€’
μ œμ•ˆλœ λΆˆν™•μ‹€μ„± 인식 손싀 ν•¨μˆ˜λŠ” μ˜μ‚¬κ²°μ • 이둠에 κΈ°λ°˜ν•˜μ—¬ 이둠적 κ·Όκ±°λ₯Ό κ°–μŠ΅λ‹ˆλ‹€.
β€’
ν˜„μž¬ μ—°κ΅¬λŠ” νŠΉμ • 데이터셋 및 λͺ¨λΈμ— λŒ€ν•œ 평가에 κ΅­ν•œλ˜λ©°, λ‹€μ–‘ν•œ LLM μ•„ν‚€ν…μ²˜ 및 μ‹€μ œ 적용 μ‹œλ‚˜λ¦¬μ˜€μ—μ„œμ˜ 좔가적인 검증이 ν•„μš”ν•©λ‹ˆλ‹€.
πŸ‘