Effort as Ceiling, Not Dial: Reasoning Budget Does Not Modulate Cognitive Cost Alignment Between Humans and Large Reasoning Models

작성자

Haebom

카테고리

Empty

저자

Yueqing Hu, Tianhong Wang

💡 개요

본 논문은 대규모 추론 모델(LRM)이 인간의 반응 시간과 유사한 추론 과정을 생성하는 현상이 실제 인지적 비용 할당 방식을 반영하는지, 아니면 단순한 텍스트 길이의 문제인지를 규명하고자 했습니다. 세 가지 추론 노력 수준과 여섯 가지 추론 작업에 걸쳐 실험한 결과, LRM과 인간의 추론 과정 길이 정렬은 추론 시 노력 수준에 따라 변하지 않았습니다. 이는 LRM의 추론 과정이 훈련 시점에 결정되며, 추론 시 노력 변화에 영향을 받지 않는다는 것을 시사합니다.

🔑 시사점 및 한계

•

LRM의 추론 과정 길이는 인간의 반응 시간과 유사하게 나타나지만, 이는 추론 시점의 노력 조절보다는 훈련 시점의 고정된 할당 정책에 의해 결정되는 것으로 보입니다.

•

LRM의 토큰 할당은 산술적 복잡성에 따라 미세하게 조정되며, 모델 규모가 커질수록 인간의 인지적 패턴과의 일치가 향상됩니다.

•

LRM의 문제 해결 방식은 '컴파일된' 방식으로 볼 수 있으며, 실시간으로 인지 비용을 조절하는 '온라인' 방식과는 거리가 있습니다.

•

본 연구는 특정 LRM 아키텍처 및 훈련 방식에 국한될 수 있으며, 다른 종류의 모델이나 훈련 데이터셋에 대한 추가 연구가 필요합니다.

PDF 보기

Made with Slashpage