Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Human Misperception of Generative-AI Alignment: A Laboratory Experiment

Created by
  • Haebom

저자

Kevin He, Ran Shorrer, Mengjia Xia

개요

본 연구는 인센티브가 부여된 실험을 통해 경제적 의사결정 상황에서 사람들이 생성형 인공지능(GenAI)의 정렬(alignment)을 어떻게 인식하는지 연구합니다. 위험, 시간 선호, 사회적 선호, 전략적 상호작용 등 여러 경제적 문제를 다루는 패널을 사용하여, 인간 피험자들에게 자신을 위한 선택을 하고 인간 사용자를 대신하여 GenAI가 할 선택을 예측하도록 요청했습니다. 그 결과, 사람들은 GenAI의 선택과 인간의 선택 사이의 정렬 정도를 과대평가하는 것으로 나타났습니다. 모든 문제에서 인간 피험자들의 GenAI 선택에 대한 평균 예측은 GenAI 선택보다 평균 인간 피험자 선택에 훨씬 더 가까웠습니다. 개인 수준에서 특정 문제에 대한 GenAI 선택에 대한 피험자들의 예측은 동일한 문제에 대한 자신의 선택과 높은 상관관계를 보였습니다. 간단한 이론적 모델을 통해 GenAI 정렬 과대평가의 함의를 탐구했습니다.

시사점, 한계점

시사점: 사람들이 GenAI의 의사결정과 자신의 의사결정 간의 정렬 정도를 과대평가한다는 것을 실험적으로 보여줌으로써, GenAI 개발 및 배포에 대한 중요한 함의를 제시합니다. GenAI에 대한 인간의 기대와 실제 GenAI의 행동 간의 차이가 예상치 못한 결과를 초래할 수 있음을 시사합니다. 간단한 이론적 모델을 통해 이러한 과대평가의 함의를 탐구한 점 또한 중요한 시사점입니다.
한계점: 실험실 환경에서 수행된 연구이므로 실제 세계 적용에 대한 일반화 가능성에 제한이 있을 수 있습니다. 사용된 경제적 문제의 종류와 범위가 제한적일 수 있으며, 다양한 유형의 GenAI 모델과 사용자 집단에 대한 연구가 추가적으로 필요합니다. 이론적 모델의 단순성 또한 한계로 지적될 수 있습니다.
👍