Can LLMs Truly Embody Human Personality? Analyzing AI and Human Behavior Alignment in Dispute Resolution

Created by

Haebom

저자

Deuksin Kwon, Kaleen Shrestha, Bin Han, Spencer Lin, James Hale, Jonathan Gratch, Maja Mataric, Gale M. Lucas

💡 개요

본 연구는 거대 언어 모델(LLM)이 사회적 맥락, 특히 분쟁 해결 상황에서 인간의 성격에 따른 행동 패턴을 얼마나 잘 재현하는지 분석합니다. 이를 위해 '빅 파이브 성격 특성(BFI)'을 기반으로 인간-인간 및 LLM-LLM 간의 분쟁 해결 대화를 직접 비교하는 평가 프레임워크와 새로운 데이터셋 구축 방법을 제안합니다. 연구 결과, 현재 LLM들은 인간의 성격 특성을 반영하는 데 상당한 차이를 보이며, 사회적으로 중요한 응용 분야에서 신뢰할 수 있는 행동 대리자로 기능하기 어렵다는 것을 보여줍니다.

🔑 시사점 및 한계

•

LLM이 인간의 성격 특성을 바탕으로 분쟁 해결 과정에서 일관된 행동 차이를 보이는지 여부에 대한 실증적 분석을 제공합니다.

•

LLM 기반 시뮬레이션의 신뢰성을 평가하기 위한 새로운 프레임워크와 데이터셋 구축 방법론을 제시합니다.

•

현재 LLM들은 성격 특성을 부여하더라도 인간과 유사한 행동 패턴을 재현하는 데 한계가 있음을 시사하며, 실제 적용 전에 심리적 근거와 검증의 필요성을 강조합니다.

•

분석 대상 LLM이 주로 폐쇄형 모델이었으므로, 향후 다양한 종류의 LLM에 대한 비교 분석 및 성격-행동 연관성을 더욱 깊이 탐구할 필요가 있습니다.

PDF 보기

Made with Slashpage