Daily Arxiv

世界中で発行される人工知能関連の論文をまとめるページです。
このページはGoogle Geminiを活用して要約し、非営利で運営しています。
論文の著作権は著者および関連機関にあり、共有する際は出典を明記してください。

EXPLOR: Extrapolatory Pseudo-Label Matching for Out-of-distribution Uncertainty Based Rejection

Created by
  • Haebom

作者

Yunni Qu (Department of Computer Science, University of North Carolina at Chapel Hill), James Wellnitz (Eshelman School of Pharmacy, University of North Carolina at Chapel Hill), Dzung Dinh (Department of Computer Science, University of North Carolina at Chapel Hill, University of North Carolina at Chapel Hill), Alexander Tropsha (Eshelman School of Pharmacy, University of North Carolina at Chapel Hill), Junier Oliva (Department of Computer Science, University of North Carolina at Chapel Hill)

概要

EXPLORは、分布外(OOD)データの予測と不確実性ベースの拒否を改善するために、サポート拡張推定仮想ラベリングを利用する新しいフレームワークです。さまざまな基本モデルを仮想ラベラーとして使用して、拡張エンハンスメントデータのOODパフォーマンスを向上させるために、共有埋め込みと新しいヘッド固有のマッチング損失を使用する複数のMLPヘッド(基本モデルごとに1つ)を使用します。モダリティ固有の拡張に依存したり、OODデータへのアクセスを前提とした以前の方法とは異なり、EXPLORは潜在空間拡張の推定仮想ラベリングを導入して、すべての実ベクトルデータに対して強力なOOD一般化を可能にします。ニューラルネットワークバックボーンを使用する従来のモダリティ非依存方法とは異なり、EXPLORはモデル非依存で、単純なツリーベースのモデルから複雑なOOD一般化モデルまで効果的に機能します。さまざまなデータセットで、単一ソースドメインの一般化設定が最先端の方法より優れたパフォーマンスを達成することを示しています。

Takeaways、Limitations

Takeaways:
潜在的空間増強による推定仮想ラベリングにより,様々なデータ型に対する強力なOOD一般化が可能
モデル非依存フレームワークで、さまざまな基本モデルに適用可能。
単一ソースドメインの一般化設定でSOTAパフォーマンスを達成
Limitations:
単一ソースドメイン一般化設定に限定された実験結果マルチソースドメインの一般化パフォーマンスは検証されていません。
提案されたマッチング損失関数の一般化性能と最適化のためのさらなる分析の必要性
様々な基本モデルの性能差の解析と最適基本モデル選択戦略のさらなる研究が必要
👍