Dans cet article, nous proposons l'alignement de modèles d'hyperréseaux (Hyma) pour résoudre le problème de coût de calcul qui se pose lors de la construction d'un modèle multimodal en combinant plusieurs modèles monomodaux pré-entraînés. Les méthodes existantes de construction de modèles multimodaux nécessitent un coût de calcul important pour entraîner les modules de connexion reliant plusieurs modèles monomodaux. Hyma résout ce problème en utilisant des hyperréseaux pour sélectionner la combinaison optimale de modèles monomodaux et entraîner simultanément les modules de connexion. Il trouve efficacement la combinaison optimale de modèles en entraînant conjointement les modules de connexion pour N x M combinaisons de modèles monomodaux grâce à la fonction de prédiction des paramètres des hyperréseaux.
