Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

Searching Latent Program Spaces

Created by
  • Haebom
Category
Empty

저자

Matthew V Macfarlane, Clement Bonnet

개요

본 논문은 새로운 기술을 효율적으로 습득하고 훈련 분포 이상으로 일반화하는 시스템을 요구하는 일반적인 지능을 목표로, 시험 시간 검색을 신경망 모델에 직접 구축하는 Latent Program Network (LPN) 아키텍처를 제안한다. LPN은 입력을 출력에 신경망 방식으로 매핑하는 잠재적 프로그램의 잠재 공간을 학습하고, 이를 통해 시험 시간 동안 기울기를 사용하여 검색한다. LPN은 상징적 접근 방식의 적응성과 신경망 방식의 확장성을 결합한다.

시사점, 한계점

LPN은 시험 시간에 컴팩트한 잠재 공간을 검색하며, 사전 정의된 도메인별 언어의 필요성을 우회한다.
LPN은 다양한 프로그래밍 예제 작업에서 문맥 내 학습 및 시험 시간 훈련 방법과 비교하여 성능을 능가하거나 일치한다.
ARC-AGI 벤치마크에서 LPN은 컴팩트한 프로그램 공간을 학습하고 시험 시간에 이를 검색하여 새로운 작업에 적응할 수 있음을 입증했다.
시험 시간 검색을 켜면 분포 외 작업에 대한 성능이 두 배로 증가한다.
👍