Counterargument for Critical Thinking as Judged by AI and Humans

작성자

Haebom

카테고리

Empty

저자

Tosin Adewumi, Marcus Liwicki, Foteini Simistira Liwicki, Lama Alkhaled, Hamam Mokayed, Esra Sumer-Arpak

💡 개요

본 연구는 생성형 AI(GenAI) 사용으로 인한 부정행위 및 인지 부하 감소 위험 속에서, 학생들이 비판적 사고 함양을 위해 논증(counterargument)을 글쓰기에 활용하는 방안을 조사했습니다. 36명의 대학생을 대상으로 4가지 논제를 제시하고 글을 작성하게 한 후, 3명의 인간 평가자와 6가지 최첨단 LLM을 통해 평가했습니다. 연구 결과, 학생들이 AI 생성 콘텐츠에 대해 작성한 반박 논증에서 비판적 사고의 핵심 요소인 논리성을 발견했으며, 명확한 루브릭을 바탕으로 GenAI가 학생들의 글쓰기 능력을 평가하고 인간 평가와 대체로 일치하는 결과를 보였습니다.

🔑 시사점 및 한계

•

생성형 AI를 활용하여 학생들의 비판적 사고 능력을 평가할 수 있음을 시사합니다.

•

학생들이 논증을 통해 비판적 사고 능력을 향상시킬 수 있음을 보여줍니다.

•

LLM 기반 평가와 인간 평가 간의 일치도가 모델별로 다소 차이를 보이며, 이는 평가 시스템 설계 시 고려해야 할 부분입니다.

•

연구 대상 학생 수가 적고 특정 대학의 한 과목에 한정되어 있어 일반화에 한계가 있습니다.

PDF 보기

Made with Slashpage