每日 Arxiv

本页面整理了世界各地发表的人工智能相关论文。
本页面使用 Google Gemini 汇总而成,并以非盈利为基础运营。
论文版权归作者及相关机构所有,分享时请注明出处。

因果适配器:驯服文本到图像的扩散以实现忠实的反事实生成

Created by
  • Haebom

作者

童雷、刘志华、陆超超、Dino Oglic、Tom Dithe、Philip Teare、Sotirios A. Tsaftaris、陈进

因果适配器:具有因果干预的反事实图像生成

大纲

Causal-Adapter 是一个模块化框架,用于使用固定的文本到图像扩散主干进行反事实图像生成。该方法能够在不改变图像核心身份的情况下对目标属性进行因果干预,并将影响持续传播到因果因变量。与以往依赖提示工程的方法不同,Causal-Adapter 利用结构因果建模,并辅以两种属性正则化策略:文本嵌入和对齐提示注入用于精确的语义控制,以及条件标记对比度损失用于分离属性元素并减少虚假相关性。Causal-Adapter 在合成数据集和真实数据集上均实现了最佳性能,在 Pendulum 数据集上,MAE 降低高达 91%,以实现精确的属性控制;在 ADNI 数据集上,FID 降低 87%,以实现高质量的 MRI 图像生成。

Takeaways, Limitations

Takeaways:
我们提出了一种从固定扩散模型生成反事实图像的稳健且可推广的方法。
实现精确的属性控制和强大的身份保存。
它在合成和真实世界的数据集上展示了最先进的性能。
Limitations:
论文中没有提及 Limitations。
👍