Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

WALL: A Web Application for Automated Quality Assurance using Large Language Models

Created by
  • Haebom

저자

Seyed Moein Abtahi, Akramul Azim

개요

본 논문은 소프트웨어 프로젝트의 복잡성 증가에 따라 코드 이슈 관리의 어려움을 해결하기 위해 SonarQube와 GPT-3.5 Turbo, GPT-4와 같은 대규모 언어 모델(LLM)을 통합한 웹 애플리케이션 WALL을 제시합니다. WALL은 이슈 추출, 코드 수정, 코드 비교 세 가지 모듈로 구성되어 자동화된 코드 이슈 탐지, 수정, 평가 파이프라인을 제공합니다. 563개 파일, 7,599개 이상의 이슈를 대상으로 한 실험 결과, WALL은 높은 품질의 수정을 유지하면서 인력 투입을 줄이는 효과를 보였으며, 비용 효율적인 LLM과 고급 LLM의 하이브리드 접근 방식을 통해 비용 절감과 수정률 향상을 달성했습니다. 향후 연구는 오픈소스 LLM 통합 및 인간 개입 제거를 통해 완전 자동화된 코드 품질 관리를 목표로 합니다.

시사점, 한계점

시사점:
SonarQube와 LLM을 통합하여 소프트웨어 이슈 관리의 자동화 및 효율 향상 가능성 제시.
비용 효율적인 LLM과 고급 LLM의 하이브리드 접근 방식을 통한 비용 절감 및 수정률 향상 효과 확인.
완전 자동화된 코드 품질 관리 시스템 구축을 위한 가능성 제시.
한계점:
현재는 오픈소스 LLM을 통합하지 않았으며, 인간 개입이 일부 존재함.
실험 데이터셋의 규모 및 다양성에 대한 추가적인 검토 필요.
다양한 종류의 소프트웨어 프로젝트 및 프로그래밍 언어에 대한 일반화 가능성에 대한 추가 연구 필요.
👍