Daily Arxiv

世界中で発行される人工知能関連の論文をまとめるページです。
このページはGoogle Geminiを活用して要約し、非営利で運営しています。
論文の著作権は著者および関連機関にあり、共有する際は出典を明記してください。

Net2Brain: A Toolbox to compare artificial vision models with human brain responses

Created by
  • Haebom

作者

Domenic Bersch, Kshitij Dwivedi, Martina Vilas, Radoslaw M. Cichy, Gemma Roig

概要

Net2Brainは、人工深層ニューラルネットワーク(DNN)と人間の脳波記録の表象空間を比較するためのグラフィカルおよびコマンドラインユーザーインターフェースツールボックスです。既存のツールボックスが単一の機能のみをサポートしたり、地図学習画像分類モデルの小さなサブセットにのみ焦点を当てたりするのとは異なり、Net2Brainは、さまざまな視覚関連タスク(セマンティックセグメンテーション、深さ推定、動き認識など)を実行するように訓練された600を超えるDNNのアクティブ化を画像およびビデオデータセットから抽出できます。このツールボックスは、対応する活性化の表象類似性行列(RDM)を計算し、特定のROIとサーチライト検索を使用して表象類似性分析(RSA)、重みRSAを介して脳波記録と比較します。さらに、評価のために新しい刺激および脳波記録データセットをツールボックスに追加できます。この論文は、認知計算神経科学の仮説を検証する方法を示す例を通して、Net2Brainの機能と利点を示しています。

Takeaways、Limitations

Takeaways:さまざまなDNNと脳波記録の表象空間を比較するための包括的なツールボックスを提供します。 RSAと重み RSAによる多様な解析手法のサポート新しいデータセットを追加可能。認知計算神経科学の研究に役立つツールを提供します。
Limitations:現在は視覚関連の作業に焦点を当てています。他のモダリティ(例えば、聴覚)データのサポートの欠如。ツールボックスのスケーラビリティとメンテナンスのための長期計画が必要です。特定のDNNアーキテクチャやデータセットに偏る可能性があります。
👍