[공지사항]을 빙자한 안부와 근황 
Show more

Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Leveraging LLMs for User Stories in AI Systems: UStAI Dataset

Created by
  • Haebom

저자

Asma Yamani, Malak Baslyman, Moataz Ahmed

개요

본 논문은 AI 시스템의 요구사항 도출 및 분석에 대한 연구 부족과 AI 시스템 요구사항 아티팩트의 부재를 지적하며, 대규모 언어 모델(LLM)을 활용하여 학술 논문 초록으로부터 AI 시스템의 사용자 스토리를 생성하는 방법을 제시합니다. 세 가지 LLM을 사용하여 26개 도메인의 42개 초록으로부터 1260개의 사용자 스토리를 생성하고, QUS 프레임워크를 이용하여 품질을 평가하고 관련 비기능적 요구사항(NFR)과 윤리적 원칙을 확인했습니다. 실험 결과, 조사된 LLM들이 다양한 이해관계자의 요구를 반영한 사용자 스토리를 생성할 수 있음을 보여주며, 연구 목적 및 AI 시스템 요구사항 도출 초기 단계 지원에 유용한 접근 방식임을 제시합니다. 또한, 생성된 스토리를 포함한 데이터셋(UStAI)을 공개적으로 제공합니다.

시사점, 한계점

시사점:
LLM을 활용하여 AI 시스템의 사용자 스토리를 효과적으로 생성할 수 있는 가능성을 제시.
AI 시스템 요구사항 도출 초기 단계의 효율성 증대에 기여.
공개 데이터셋(UStAI) 제공을 통해 후속 연구 및 개발 지원.
다양한 도메인의 AI 시스템 요구사항 분석에 대한 통찰력 제공.
한계점:
평가에 사용된 QUS 프레임워크의 한계.
LLM 생성 사용자 스토리의 품질에 대한 추가적인 검증 필요.
사용된 LLM의 특징과 한계에 대한 자세한 분석 부족.
실제 AI 시스템 개발 환경에서의 적용 가능성에 대한 추가적인 연구 필요.
LLM에 의존적인 방법론의 편향성 및 신뢰성 문제.
👍