Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Bridging Social Psychology and LLM Reasoning: Conflict-Aware Meta-Review Generation via Cognitive Alignment

Created by
  • Haebom
Category
Empty

저자

Wei Chen, Han Ding, Meng Yuan, Zhao Zhang, Deqing Wang, Fuzhen Zhuang

개요

본 논문은 학술 제출물의 급증으로 인해 기존의 동료 검토 시스템이 과부하에 직면함에 따라 과학적 엄격성을 유지하기 위한 지능형 자동화의 필요성이 증대된 점을 배경으로 한다. 대규모 언어 모델(LLM)이 원고 비평 자동화에 유용성을 보이지만, 상반된 의견을 처리하고 합의를 도출해야 하는 고위험 메타 리뷰를 종합하는 능력은 아직 미흡하다. 기존 방법들은 상충하는 관점을 효과적으로 처리하지 못하고, 닻 효과나 순응 편향과 같은 추가적인 인지 편향을 도입하는 경우가 많다. 이러한 한계를 극복하기 위해, 본 논문은 LLM을 적응형 과학적 중재자로 변환하는 이중 과정 아키텍처인 인지 정렬 프레임워크(CAF)를 제안한다. 카네만의 이중 과정 이론을 활용하여, CAF는 검토 초기화, 점진적 통합, 인지 정렬의 세 단계로 구성된 인지 파이프라인을 도입한다. 실험적 검증 결과, CAF는 기존 LLM 기반 방법보다 우수한 성능을 보이며, 감정 일관성은 최대 19.47% 향상, 내용 일관성은 최대 12.95% 향상되는 것을 확인했다.

시사점, 한계점

시사점:
LLM을 활용한 과학적 메타 리뷰 자동화의 새로운 가능성 제시
카네만의 이중 과정 이론을 기반으로 한 CAF의 효과성 검증
기존 방법 대비 감정 및 내용 일관성 향상을 통한 메타 리뷰 질 향상
학술 검토 시스템의 효율성 및 신뢰성 증대에 기여
한계점:
CAF의 성능 평가가 특정 데이터셋에 국한될 가능성
실제 학술 검토 환경에서의 일반화 가능성에 대한 추가 연구 필요
인지 편향 완전 제거의 어려움 및 향후 개선 필요성
다양한 학문 분야에 대한 적용성 검증 필요
👍