Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Large Language Models Empowered Personalized Web Agents

Created by
  • Haebom
Category
Empty

저자

Hongru Cai, Yongqi Li, Wenjie Wang, Fengbin Zhu, Xiaoyu Shen, Wenjie Li, Tat-Seng Chua

개요

본 논문은 사용자 지시에 기반한 웹 작업 자동화를 위한 유망한 방향으로 떠오르고 있는 웹 에이전트, 특히 최근 발전된 대규모 언어 모델(LLM) 기반 웹 에이전트에 대해 다룹니다. 기존 LLM 기반 웹 에이전트는 사용자의 개인화된 지시 이해 및 맞춤형 작업 실행에 있어 사용자 프로필 및 과거 웹 행동 등의 개인화된 데이터의 중요성을 간과한다는 한계를 지적합니다. 이를 극복하기 위해, 개인화된 데이터와 사용자 지시를 통합하여 지시 이해 및 작업 실행을 개인화하는 LLM 기반 개인화 웹 에이전트 작업을 정의하고, 이를 위한 포괄적인 평가 벤치마크인 PersonalWAB을 제시합니다. PersonalWAB은 사용자 지시, 개인화된 사용자 데이터, 웹 기능 및 두 가지 평가 패러다임을 세 가지 개인화된 웹 작업에 걸쳐 제공합니다. 또한, LLM을 개인화된 웹 에이전트 작업에 적용하기 위한 Personalized User Memory-enhanced Alignment (PUMA) 프레임워크를 제안합니다. PUMA는 작업별 검색 전략을 사용하는 메모리 뱅크를 활용하여 관련 과거 웹 행동을 필터링하고, 이를 기반으로 미세 조정 및 직접 선호도 최적화를 통해 LLM을 개인화된 작업 실행에 맞춥니다. 실험 결과, PUMA가 PersonalWAB에서 기존 웹 에이전트보다 우수함을 보여줍니다.

시사점, 한계점

시사점:
개인화된 데이터를 활용한 LLM 기반 웹 에이전트의 중요성을 강조하고, 개인 맞춤형 웹 경험 향상에 기여할 수 있는 새로운 접근 방식을 제시합니다.
개인화된 웹 에이전트 평가를 위한 새로운 벤치마크인 PersonalWAB을 제공하여, 향후 연구의 발전에 기여합니다.
PUMA 프레임워크는 개인화된 웹 에이전트 성능 향상에 효과적임을 실험적으로 검증합니다.
한계점:
PersonalWAB의 규모 및 다양성이 제한적일 수 있으며, 더욱 다양한 사용자 및 작업에 대한 일반화 가능성을 추가적으로 검증해야 합니다.
PUMA 프레임워크의 효율성 및 확장성에 대한 추가적인 분석이 필요할 수 있습니다. 특히, 대규모 데이터셋에 대한 성능 평가가 필요합니다.
개인정보 보호 문제에 대한 고려가 필요하며, 개인 데이터 활용에 대한 윤리적 측면을 충분히 다루지 못했습니다.
👍