Net2Brain은 인공 심층 신경망(DNN)과 인간 뇌파 기록의 표상 공간을 비교하기 위한 그래픽 및 명령줄 사용자 인터페이스 툴박스입니다. 기존 툴박스들이 단일 기능만 지원하거나 지도 학습 이미지 분류 모델의 작은 하위 집합에만 초점을 맞춘 것과 달리, Net2Brain은 다양한 시각 관련 작업(예: 의미론적 분할, 깊이 추정, 동작 인식 등)을 수행하도록 훈련된 600개 이상의 DNN의 활성화를 이미지 및 비디오 데이터셋에서 추출할 수 있습니다. 이 툴박스는 해당 활성화에 대한 표상 유사성 행렬(RDM)을 계산하고, 특정 ROI와 서치라이트 검색을 사용하여 표상 유사성 분석(RSA), 가중치 RSA를 통해 뇌파 기록과 비교합니다. 또한, 평가를 위해 새로운 자극 및 뇌파 기록 데이터셋을 툴박스에 추가할 수 있습니다. 본 논문에서는 인지 계산 신경과학의 가설을 검증하는 방법을 보여주는 예시를 통해 Net2Brain의 기능과 장점을 보여줍니다.
