Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

A Qualitative Study of User Perception of M365 AI Copilot

Created by
  • Haebom

저자

Muneera Bano, Didar Zowghi, Jon Whittle, Liming Zhu, Andrew Reeson, Rob Martin, Jen Parsons

개요

본 논문은 2024년 6개월간 진행된 M365 Copilot 사내 시험 결과를 바탕으로 AI 코파일럿의 실무 적용에 대한 사용자 경험을 정성적으로 분석한 연구이다. 27명의 참가자 인터뷰를 통해 M365 Copilot의 효과성, 생산성 향상, 기대치 변화, 윤리적 우려, 전반적 만족도를 조사하였다. 초기 높은 기대와 달리, 이메일 코칭, 회의 요약, 콘텐츠 검색 등 특정 작업에서는 효과적이었으나, 깊이 있는 맥락 이해, 추론, 기존 업무 흐름과의 통합이 필요한 영역에서는 기대에 못 미치는 결과를 보였다. 데이터 프라이버시, 투명성, AI 편향 등 윤리적 문제 또한 지속적으로 제기되었으며, 특정 운영 영역에서의 가치에도 불구하고 사용성 제한 및 AI 생성 결과 검증을 위한 인간 감독의 필요성으로 인해 광범위한 영향력은 제한적이었다.

시사점, 한계점

시사점:
M365 Copilot과 같은 AI 코파일럿은 이메일 코칭, 회의 요약, 콘텐츠 검색 등 특정 작업의 생산성 향상에 기여할 수 있다.
AI 코파일럿 도입 시 사용자의 기대치 관리 및 윤리적 문제 고려가 중요하다.
AI 생성 결과에 대한 인간 감독 및 검증 절차가 필수적이다.
한계점:
깊이 있는 맥락 이해 및 추론 능력이 부족하여 모든 작업에 효과적으로 적용되지는 못한다.
기존 업무 흐름과의 통합에 어려움이 있다.
데이터 프라이버시, 투명성, AI 편향 등 윤리적 문제가 발생할 수 있다.
사용성 제한으로 인해 광범위한 영향력을 발휘하지 못한다.
👍