Daniel Wurgaft, Ben Prystawski, Kanishk Gandhi, Cedegao E. Zhang, Joshua B. Tenenbaum, Noah D. Goodman
개요
본 논문은 사고 과정을 말로 묘사하는 생각-소리내기(think-aloud) 방법을 대규모로 분석하기 위해 자연어 처리 기술을 활용한 자동 전사 및 주석 방법을 개발한 연구입니다. 640명의 참가자를 대상으로 수학적 추론 과제인 '24 게임'을 수행하며 생각-소리내기를 하도록 했고, 녹음된 내용을 자동 전사하여 탐색 그래프로 코딩했습니다. 인간 평가자와의 중간 정도의 신뢰도를 보였으며, 분석을 통해 인간 추론 과정의 일관성과 변동성을 특징짓고, 생각-소리내기 데이터의 대규모 분석 가능성을 보여줍니다.