Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

AdvisingWise: Supporting Academic Advising in Higher Educations Through a Human-in-the-Loop Multi-Agent Framework

Created by
  • Haebom
Category
Empty

저자

Wendan Jiang, Shiyuan Wang, Hiba Eltigani, Rukhshan Haroon, Abdullah Bin Faisal, Fahad Dogar

개요

본 논문은 대학생들의 성공적인 학업을 지원하는 데 중요한 역할을 하는 학업 상담 과정에서, 대규모 언어 모델(LLM)을 활용하여 시간 소모적인 작업을 자동화하고 인간의 감독을 유지하는 다중 에이전트 시스템인 AdvisingWise를 제안한다. AdvisingWise는 권위 있는 기관 자료를 활용하고, 학생들의 배경에 따라 적응적으로 질문하여 신뢰할 수 있고 개인화된 답변을 생성한다. 모든 시스템 응답은 학생에게 전달되기 전에 인간 상담원의 검증을 거친다. 20개의 샘플 쿼리에 대한 전문가 평가, 정보 검색 전략에 대한 LLM-as-a-judge 평가, 8명의 학업 상담원을 대상으로 한 사용자 연구를 통해 AdvisingWise의 효용성을 평가했다. 그 결과 AdvisingWise는 정확하고 개인화된 응답을 제공하며, 상담원들은 시스템 사용 후 신뢰성과 개인화에 대한 우려가 감소하면서 긍정적인 인식을 나타냈다.

시사점, 한계점

시사점:
LLM을 활용하여 학업 상담 과정의 효율성을 증대시킴.
시간 소모적인 작업 자동화를 통해 상담원의 부담을 경감시키고, 학생들에게 적시에 지원을 제공할 수 있도록 함.
인간 감독을 통해 시스템의 신뢰성을 확보하고, 개인화된 답변을 제공.
학업 상담 분야에서 인간-AI 협력의 가능성을 제시.
한계점:
구체적인 시스템 성능 지표나 성공적인 적용 사례에 대한 자세한 정보 부족.
제안된 시스템의 일반화 가능성에 대한 추가적인 연구 필요.
시스템의 장기적인 영향 및 지속적인 유지 보수에 대한 고려 부족.
👍