Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Trapped by Expectations: Functional Fixedness in LLM-Enabled Chat Search

Created by
  • Haebom

저자

Jiqun Liu, Jamshed Karimnazarov, Ryen W. White

개요

본 논문은 대규모 언어 모델(LLM) 기반 채팅 검색에서 기능적 고정성(functional fixedness)이 미치는 영향을 조사한 연구 결과를 제시한다. 450명의 참가자를 대상으로 한 크라우드소싱 연구를 통해 공공 안전, 식단 및 건강 관리, 지속 가능성, AI 윤리 등 다양한 의사결정 과제에서 참가자들이 ChatGPT와의 대화를 통해 과제를 해결하는 과정을 분석하였다. 연구 결과, 사전 기대는 ChatGPT, 검색 엔진, 가상 비서 사용 경험과 밀접하게 관련되어 있으며, 이러한 사전 경험은 언어 사용과 프롬프트 작성 행동에 영향을 미치는 것으로 나타났다. 시스템이 기대를 충족하지 못할 경우, 참가자들은 더욱 자세한 프롬프트를 생성하고 언어적 다양성을 높이는 적응적 변화를 보였다. 이는 사전 기대가 초기 상호작용을 제한하지만, 기대 불일치는 행동적 적응을 유도할 수 있음을 시사한다. 본 연구는 채팅 검색에서 사용자 의도의 유형론을 제시하고, 더욱 창의적이고 분석적인 LLM 사용을 지원하기 위해 기능적 고정성을 완화하는 것이 중요함을 강조한다.

시사점, 한계점

시사점:
LLM 기반 채팅 검색에서 기능적 고정성이 사용자 상호작용을 제한함을 밝힘.
사용자의 사전 경험이 LLM과의 상호작용 방식에 영향을 미침을 확인.
시스템의 기대 불일치가 사용자의 적응적 행동 변화를 유도함을 제시.
채팅 검색에서 사용자 의도의 유형론을 제시.
기능적 고정성 완화를 통해 LLM의 창의적이고 분석적인 활용을 증진시킬 수 있음을 시사.
한계점:
연구 대상이 특정 LLM(ChatGPT) 및 특정 과제 유형에 국한됨.
참가자들의 다양성(예: 기술 숙련도, LLM 사용 경험의 차이 등)에 대한 자세한 분석 부족.
기능적 고정성 완화를 위한 구체적인 시스템 지원 방안 제시 부족.
👍