EDUMATH: Generating Standards-aligned Educational Math Word Problems

Created by

Haebom

저자

Bryan R. Christ, Penelope Molitz, Beau LeBlond, Zachary Gottesman, Jonathan Kropko, Thomas Hartvigsen

💡 개요

본 논문은 교사의 시간 부족 문제 해결을 위해 LLM을 활용하여 학생의 흥미와 교육 표준에 맞는 수학 응용 문제를 생성하는 EDUMATH를 제안합니다. 11,000개 이상의 문제를 생성하고 인간 전문가와 LLM 판별자를 활용한 평가를 통해 최초로 표준 연계 교육용 수학 응용 문제 생성을 위한 교사 주석 데이터셋을 구축했습니다. 이 데이터셋을 활용하여 12B 모델은 더 크고 성능이 뛰어난 모델들과 동등한 성능을 보였으며, 30B 모델은 기존 폐쇄형 모델들을 능가하는 성능을 달성했습니다.

🔑 시사점 및 한계

•

LLM을 통해 교사의 부담을 줄이고 학생 맞춤형 수학 학습 자료를 효과적으로 생성할 수 있음을 입증했습니다.

•

최초로 교사 주석을 기반으로 표준 연계 수학 응용 문제 생성 모델 개발에 필요한 데이터를 구축하고 이를 활용한 성능 향상을 보여주었습니다.

•

생성된 수학 응용 문제는 인간 작성 문제와 유사할 뿐만 아니라, 학생들은 맞춤화된 LLM 생성 문제에 대한 선호도를 보였습니다.

•

아직은 LLM 생성 문제와 인간 작성 문제 간의 학습 성과 차이가 크지 않으며, 생성된 문제의 창의성 및 다양성 측면에서 더 많은 연구가 필요할 수 있습니다.

PDF 보기

Made with Slashpage