Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

OpenMMReasoner: Pushing the Frontiers for Multimodal Reasoning with an Open and General Recipe

Created by
  • Haebom
Category
Empty

저자

Kaichen Zhang, Keming Wu, Zuhao Yang, Kairui Hu, Bin Wang, Ziwei Liu, Xingxuan Li, Lidong Bing

개요

본 논문은 대규모 추론 모델의 멀티모달 영역 확장에 대한 연구로, 투명하고 재현 가능한 데이터 큐레이션 및 학습 전략 부족 문제를 해결하고자 한다. OpenMMReasoner라는 완전 투명한 2단계 멀티모달 추론 레시피를 제안하며, 지도 학습 미세 조정(SFT)과 강화 학습(RL)을 사용한다. SFT 단계에서는 874K 샘플의 콜드 스타트 데이터셋을 구축하여 추론 능력을 강화하고, RL 단계에서는 74K 샘플 데이터셋을 활용하여 능력을 더욱 향상시키고 안정화시킨다. 제안된 방법은 강력한 기준선을 능가하며, 데이터 품질과 학습 설계가 멀티모달 추론 성능에 미치는 중요한 역할을 강조한다. Qwen2.5-VL-7B-Instruct 기준선 대비 9개의 멀티모달 추론 벤치마크에서 11.6% 향상을 달성했다.

시사점, 한계점

시사점:
완전 투명한 2단계 멀티모달 추론 레시피(SFT 및 RL) 제안.
데이터 품질과 학습 설계의 중요성을 강조.
강력한 기준선 대비 우수한 성능 달성.
오픈 소스 코드, 파이프라인, 데이터 제공.
대규모 멀티모달 추론 연구를 위한 기반 마련.
한계점:
논문에서 구체적인 한계점은 명시되지 않음.
👍