Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Goal2Story: A Multi-Agent Fleet based on Privately Enabled sLLMs for Impacting Mapping on Requirements Elicitation

Created by
  • Haebom
Category
Empty

저자

Xinkai Zou, Yan Liu, Xiongbo Shi, Chen Yang

개요

본 논문은 애자일 개발 환경에서 목표 기반 요구사항 도출(RE)을 위한 다중 에이전트 시스템인 Goal2Story를 제안한다. Goal2Story는 Impact Mapping 프레임워크를 채택하고 비용 효율적인 소규모 LLM(sLLM)을 사용하여 목표에서 사용자 스토리로 이어지는 과정을 지원한다. 또한, 1,000개 이상의 사용자 스토리와 해당 목표, 프로젝트 컨텍스트 정보를 포함하는 StorySeek 데이터셋과 그 구축 방법을 제시한다. 성능 평가를 위해 Factuality Hit Rate (FHR)과 Quality And Consistency Evaluation (QuACE)라는 두 가지 지표를 제안하고, 실험 결과를 통해 Goal2Story가 강력한 LLM을 사용하는 Super-Agent보다 우수한 성능을 보이며, Chain of Thought (CoT)와 Agent Profile을 통해 성능이 향상됨을 보여준다. 기존 연구들이 기능적 RE에 집중하고 목표에서 사용자 스토리로의 과정을 다루지 못한 점을 개선하고, 비용 및 데이터 보안 문제를 해결하기 위해 sLLM을 활용하는 데 중점을 둔다.

시사점, 한계점

시사점:
비용 효율적인 sLLM을 활용하여 목표 기반 요구사항 도출을 위한 효과적인 다중 에이전트 시스템을 제시.
목표에서 사용자 스토리 생성 과정을 지원하는 새로운 접근 방식 제시.
목표와 사용자 스토리 간의 일관성 및 사용자 스토리의 품질을 평가하기 위한 새로운 지표 제시.
CoT와 Agent Profile을 통해 성능 향상 가능성을 보여줌.
잠재적 요구사항 파악에 대한 탐색.
대규모 데이터셋인 StorySeek 제공.
한계점:
제안된 시스템의 일반화 가능성에 대한 추가적인 검증 필요.
다양한 애자일 개발 환경 및 프로젝트 유형에 대한 적용성 검토 필요.
sLLM의 성능 한계로 인한 정확도 저하 가능성.
StorySeek 데이터셋의 범용성 및 대표성에 대한 추가 검토 필요.
👍