[공지사항]을 빙자한 안부와 근황 
Show more

Daily Arxiv

전 세계에서 발간되는 인공지능 관련 논문을 정리하는 페이지 입니다.
본 페이지는 Google Gemini를 활용해 요약 정리하며, 비영리로 운영 됩니다.
논문에 대한 저작권은 저자 및 해당 기관에 있으며, 공유 시 출처만 명기하면 됩니다.

GreenFactory: Ensembling Zero-Cost Proxies to Estimate Performance of Neural Networks

Created by
  • Haebom

저자

Gabriel Cortes, Nuno Louren\c{c}o, Paolo Romano, Penousal Machado

개요

본 논문에서는 신경망 구조 탐색(NAS) 과정에서 심층 신경망의 성능을 효율적으로 예측하는 새로운 방법인 GreenFactory를 제안합니다. GreenFactory는 여러 제로-코스트 프록시(zero-cost proxy)들을 랜덤 포레스트 회귀 모델을 이용하여 결합하여 모델의 테스트 정확도를 직접 예측합니다. 기존의 제로-코스트 프록시들이 다양한 시나리오에서 일반화 성능이 부족하고 상대적인 순위만 제공하는 한계를 극복하기 위해 고안되었으며, NATS-Bench 데이터셋을 이용한 실험 결과, CIFAR-10, CIFAR-100, ImageNet-16-120 데이터셋에서 높은 Kendall 상관관계(0.9 이상)를 달성하여 예측 성능의 우수성을 보여줍니다.

시사점, 한계점

시사점:
기존 제로-코스트 프록시의 한계를 극복하여 신경망 구조 탐색 과정의 효율성을 크게 향상시킬 수 있습니다.
다양한 데이터셋에서 높은 예측 정확도를 보이며 견고한 성능을 제공합니다.
랜덤 포레스트 기반의 앙상블 방법을 통해 여러 프록시의 장점을 효과적으로 결합합니다.
실제 테스트 정확도를 직접 예측하여 상대적인 순위 비교보다 더 직관적인 성능 평가를 가능하게 합니다.
한계점:
GreenFactory의 성능은 NATS-Bench 데이터셋에 대한 평가 결과에 기반하므로, 다른 데이터셋이나 더 복잡한 신경망 구조에 대한 일반화 성능은 추가적인 연구가 필요합니다.
랜덤 포레스트 모델의 하이퍼파라미터 최적화에 대한 논의가 부족합니다.
제안된 프록시들의 종류 및 선택 기준에 대한 자세한 설명이 필요할 수 있습니다.
👍