Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

LLM-D12: A Dual-Dimensional Scale of Instrumental and Relational Dependencies on Large Language Models

Created by
  • Haebom

저자

Ala Yankouskaya, Areej B. Babiker, Syeda W. F. Rizvi, Sameha Alshakhsi, Magnus Liebherr, Raian Ali

개요

본 논문은 대규모 언어 모델(LLM)에 대한 의존성 또는 중독성 행동을 평가하기 위한 새로운 척도인 LLM-D12를 개발하고 검증한 연구이다. 기존의 행동 중독 증상을 LLM 사용 환경에 적용한 기존 척도의 개념적 한계를 극복하고자, LLM과 인간의 상호작용의 미묘한 측면을 고려하여 새로운 척도를 제시하였다. 526명의 영국 참가자를 대상으로 수집된 데이터를 이용하여 탐색적 및 확인적 요인 분석을 실시한 결과, 도구적 의존성(Instrumental Dependency)과 관계적 의존성(Relationship Dependency)의 두 가지 요인으로 구성된 12개 문항의 척도가 제시되었다. 도구적 의존성은 의사결정 및 인지적 과제에서 LLM에 대한 의존 정도를, 관계적 의존성은 LLM을 사회적으로 의미 있고, 지각력이 있으며, 동반자와 같은 존재로 인식하는 경향을 반영한다. LLM-D12 척도는 우수한 내적 일관성과 명확한 판별 타당성을 보였으며, 외부 타당성 검증을 통해 개념적 토대와 두 하위 척도 간의 구분을 확인하였다. LLM에 대한 의존성이 반드시 기능 장애를 나타내는 것은 아니지만 특정 상황에서 문제가 될 수 있는 의존 수준을 반영할 수 있다는 점을 고려하여 척도의 심리 측정적 특성과 구조를 해석하였다.

시사점, 한계점

시사점:
LLM에 대한 의존성을 측정하는 새로운 척도인 LLM-D12를 개발하고 검증하여, LLM 사용과 관련된 의존성 연구에 기여하였다.
LLM 의존성을 도구적 의존성과 관계적 의존성이라는 두 가지 측면으로 구분하여 보다 정교한 이해를 제공하였다.
LLM 의존성이 기능 장애를 나타내는 것만이 아니라, 특정 상황에서 문제가 될 수 있는 다양한 수준의 의존성을 고려해야 함을 시사하였다.
한계점:
연구 참가자의 대부분이 영국인으로, 문화적 일반화 가능성에 제한이 있다.
샘플 크기가 다소 작을 수 있다.
LLM 사용 경험의 다양성을 충분히 반영하지 못했을 가능성이 있다. (추가적인 연구가 필요할 수 있음을 시사)
장기적인 LLM 사용에 따른 의존성 변화 추이를 반영하지 못했다. (추가적인 종단 연구 필요)
👍