Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Concept-RuleNet: Grounded Multi-Agent Neurosymbolic Reasoning in Vision Language Models

Created by
  • Haebom
Category
Empty

저자

Sanchit Sinha, Guangzhi Xiong, Zhenghao He, Aidong Zhang

Concept-RuleNet: 비전-언어 모델의 해석 가능성 향상

개요

본 논문은 비전-언어 모델(VLM)의 해석 가능성을 높이기 위해 개발된 Concept-RuleNet을 소개합니다. 이 모델은 블랙박스 형태의 예측과 해석 가능한 심볼릭 추론을 결합한 신경심볼릭 프레임워크를 기반으로 합니다. Concept-RuleNet은 시각적 개념을 직접 추출하여 심볼을 생성하고, 이를 대규모 언어 모델(LLM) 기반의 추론 에이전트를 통해 실행 가능한 규칙으로 변환합니다. 실험 결과, 이 시스템은 기존 신경심볼릭 모델보다 성능이 향상되었으며, 허구의 심볼 발생 빈도를 줄이는 효과를 보였습니다.

시사점, 한계점

시사점:
시각적 개념을 기반으로 하는 심볼 생성 및 규칙 구축을 통해 VLM의 해석 가능성을 향상시킴.
허위 정보(hallucination) 발생 빈도를 줄여 모델의 신뢰도를 높임.
의료 영상 및 소외된 자연 이미지 데이터셋을 포함한 다양한 벤치마크에서 기존 모델 대비 향상된 성능을 보임.
한계점:
논문에 명시된 한계점은 제시되지 않음. (논문 내용 요약에 한계점에 대한 언급이 없음)
👍