Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

GAIus: Combining Genai with Legal Clauses Retrieval for Knowledge-based Assistant

Created by
  • Haebom

저자

Micha{\l} Matak, Jaros{\l}aw A. Chudziak

개요

본 논문은 영어 및 중국어 이외 언어를 사용하는 국가의 법률 문제를 다룰 때 대규모 언어 모델(LLM)이 답변을 제시하고 적절한 참고 자료를 제공하는 능력에 대해 논의합니다. 법률 정보 검색의 역사, 판례법과 성문법의 차이점, 법률 과제에 미치는 영향, 그리고 이 분야의 최신 연구를 분석합니다. 이러한 배경을 바탕으로, 폴란드 민법에서 검색된 지식을 기반으로 응답하는 인지 LLM 기반 에이전트인 gAIus의 아키텍처를 소개합니다. 임베딩 기반 접근 방식보다 설명 가능하고 사용자 친화적이며 더 나은 결과를 얻는 검색 메커니즘을 제안합니다. 제안된 방법을 평가하기 위해 폴란드에서 실시되는 법률 수습생 입학 시험의 단일 선택 질문을 기반으로 특수 데이터 세트를 생성합니다. 제안된 아키텍처는 사용된 대규모 언어 모델의 기능을 크게 활용하여 gpt-3.5-turbo-0125를 419% 향상시켜 gpt-4o를 능가하고 gpt-4o-mini 점수를 31%에서 86%로 향상시켰습니다. 마지막으로, 향후 연구 방향과 연구 결과의 잠재적 응용 분야를 제시합니다.

시사점, 한계점

시사점: 비영어권 및 비중국어권 국가의 법률 문제에 대한 LLM의 성능 향상 가능성을 보여주는 새로운 아키텍처(gAIus)를 제시합니다. 임베딩 기반 접근 방식보다 설명 가능성과 사용자 친화성이 높은 검색 메커니즘을 제안합니다. 기존 LLM의 성능을 획기적으로 향상시키는 결과를 얻었습니다.
한계점: 폴란드 민법에 국한된 연구로, 다른 법 체계에 대한 일반화 가능성은 제한적입니다. 사용된 데이터 세트가 폴란드 법률 수습생 입학 시험의 단일 선택 질문에 기반하여 실제 법률 사례의 복잡성을 완전히 반영하지 못할 수 있습니다. 향후 연구를 통해 다양한 법 체계 및 더욱 복잡한 법률 문제에 대한 일반화 가능성을 검증해야 합니다.
👍