Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

TalkPlayData 2: An Agentic Synthetic Data Pipeline for Multimodal Conversational Music Recommendation

Created by
  • Haebom

저자

Keunwoo Choi, Seungheon Doh, Juhan Nam

개요

TalkPlayData 2는 에이전트 기반 데이터 파이프라인을 통해 생성된 멀티모달 대화형 음악 추천을 위한 합성 데이터 세트이다. 이 파이프라인은 다양한 역할과 전문화된 프롬프트를 가진 여러 대규모 언어 모델(LLM) 에이전트를 생성하고, Listener LLM과 Recsys LLM 간의 대화를 기록하여 채팅 데이터를 획득한다. 다양한 대화 시나리오를 다루기 위해, 각 대화에서 Listener LLM은 미세 조정된 대화 목표에 따라 조건화된다. 모든 LLM은 오디오 및 이미지를 포함하는 멀티모달이며, 멀티모달 추천 및 대화 시뮬레이션이 가능하다. LLM-as-a-judge 및 주관적 평가 실험에서 TalkPlayData 2는 음악 생성 추천 모델 훈련과 관련된 다양한 측면에서 목표를 달성했다.

시사점, 한계점

시사점:
에이전트 기반 파이프라인을 통한 멀티모달 대화형 음악 추천 데이터 세트 생성
다양한 대화 시나리오를 포괄하는 데이터 구성
멀티모달 LLM을 활용한 추천 및 대화 시뮬레이션
음악 생성 추천 모델 훈련에 활용 가능
TalkPlayData 2 및 생성 코드 공개
한계점:
논문 요약에서 구체적인 한계점 언급 없음
👍