Sign In

LLM Prompt Evaluation for Educational Applications

Created by
  • Haebom
Category
Empty

μ €μž

Langdon Holmes, Adam Coscia, Scott Crossley, Joon Suh Choi, Wesley Morris

πŸ’‘ κ°œμš”

λ³Έ μ—°κ΅¬λŠ” ꡐ윑 λΆ„μ•Όμ—μ„œ LLM ν™œμš© 증가에 따라 개인 λ§žμΆ€ν˜• 및 ꡐ윑적 λ§₯락에 λ§žλŠ” 좜λ ₯을 μƒμ„±ν•˜λŠ” ν”„λ‘¬ν”„νŠΈ 섀계 및 평가λ₯Ό μœ„ν•œ 체계적인 접근법을 μ œμ‹œν•©λ‹ˆλ‹€. 6가지 ν”„λ‘¬ν”„νŠΈ ν…œν”Œλ¦Ώμ„ ν† λ„ˆλ¨ΌνŠΈ λ°©μ‹μ˜ 평가 ν”„λ ˆμž„μ›Œν¬λ‘œ 비ꡐ λΆ„μ„ν–ˆμœΌλ©°, 특히 메타인지 ν•™μŠ΅ μ „λž΅μ„ μ§€μ›ν•˜λŠ” ν”„λ‘¬ν”„νŠΈκ°€ κ°€μž₯ μš°μˆ˜ν•œ μ„±λŠ₯을 λ³΄μ˜€μŠ΅λ‹ˆλ‹€. 이 μ—°κ΅¬λŠ” ꡐ윑 μ‘μš© λΆ„μ•Όμ—μ„œ 증거 기반의 ν”„λ‘¬ν”„νŠΈ κ°œλ°œμ„ μœ„ν•œ 방법둠을 μ œμ‹œν•©λ‹ˆλ‹€.

πŸ”‘ μ‹œμ‚¬μ  및 ν•œκ³„

β€’
ꡐ윑 λΆ„μ•Όμ—μ„œ LLM ν”„λ‘¬ν”„νŠΈ 평가λ₯Ό μœ„ν•œ 일반적이고 체계적인 방법둠을 μ œκ³΅ν•©λ‹ˆλ‹€.
β€’
메타인지 ν•™μŠ΅ μ „λž΅μ„ μ§€μ›ν•˜λŠ” ν”„λ‘¬ν”„νŠΈκ°€ ꡐ윑적 효과 μΈ‘λ©΄μ—μ„œ 뛰어남을 μž…μ¦ν–ˆμŠ΅λ‹ˆλ‹€.
β€’
평가에 μ‚¬μš©λœ 8λͺ…μ˜ μ‹¬μ‚¬μœ„μ› 및 3가지 평가 차원이 λͺ¨λ“  ꡐ윑 μ‘μš© 뢄야에 μ™„λ²½ν•˜κ²Œ μΌλ°˜ν™”λ  수 μžˆλŠ”μ§€μ— λŒ€ν•œ 좔가적인 검증이 ν•„μš”ν•©λ‹ˆλ‹€.
πŸ‘
Made with Slashpage