Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

PromptRefine: Enhancing Few-Shot Performance on Low-Resource Indic Languages with Example Selection from Related Example Banks

Created by
  • Haebom

저자

Soumya Suvra Ghosal, Soumyabrata Pal, Koyel Mukherjee, Dinesh Manocha

개요

본 논문은 저자원 인도어에서의 소수 샷 학습 성능 향상을 위한 새로운 예시 선택 방법인 PromptRefine을 제안합니다. PromptRefine은 관련 고자원 인도어의 보조 예시 뱅크를 활용하고 다중 작업 학습 기법을 통해 언어별 검색기를 정렬하여 효과적인 언어 간 검색을 가능하게 합니다. 또한, 선택된 예시의 다양성을 통합하여 일반화 성능을 높이고 편향을 줄입니다. LLAMA-3.1-8B, LLAMA-2-7B, Qwen-2-7B, Qwen-2.5-7B와 같은 최첨단 LLMs을 사용하여, 다국어 질의응답, 기계 번역, 언어 간 요약 등 네 가지 텍스트 생성 작업에 대한 종합적인 평가를 통해 기존 예시 검색 프레임워크보다 PromptRefine의 성능이 우수함을 보여줍니다.

시사점, 한계점

시사점:
저자원 인도어에서의 소수 샷 학습 성능을 향상시키는 새로운 방법 제시.
고자원 언어의 데이터를 활용하여 저자원 언어 모델의 성능 개선.
다양한 예시 선택을 통해 일반화 성능 향상 및 편향 감소.
다양한 최첨단 LLMs에서의 실험을 통해 방법의 효과성 검증.
한계점:
제안된 방법의 효과는 특정 인도어와 특정 LLMs에 국한될 수 있음.
보조 예시 뱅크의 질에 따라 성능이 영향을 받을 수 있음.
다른 저자원 언어로의 일반화 가능성에 대한 추가 연구 필요.
👍