会员登录 - 用户注册 - 设为首页 - 加入收藏 - 网站地图 NVIDIA 自动引导技术:改善扩散模型中的图像质量和变化!

NVIDIA 自动引导技术:改善扩散模型中的图像质量和变化

时间:2024-07-02 03:23:20 来源:带水拖泥网 作者:知识 阅读:718次

NVIDIA 自动引导技术:改善扩散模型中的图像质量和变化

划重点:

- 💡 NVIDIA 提出的自动中的质量自动引导方法在扩散模型中使用较小的模型来引导生成过程,显著改善了图像生成的引导质量和多样性。

- 💡 通过自动引导方法,技术研究人员在 ImageNet-512和 ImageNet-64等基准测试中取得了新的改善记录成绩,实现了对图像生成质量的扩散显著提升。

- 💡 这一创新方法在解决当前方法存在的模型局限性的同时,为生成高质量和多样化图像提供了更高效、图像更有效的和变化解决方案。

CSS站长资源(ChinaZ.com)6月7日 消息:NVIDIA 近期提出了一种名为自动引导的自动中的质量新方法,旨在改善扩散模型中图像的引导质量和变化,而不影响其与给定条件(如类标签或文本提示)的技术一致性。当前的改善方法通常会以牺牲多样性为代价来提高图像质量,从而限制了它们在医学诊断和自动驾驶等各种现实场景中的扩散适用性。然而,模型克服这一挑战可以提升人工智能系统在生成逼真且多样化图像方面的图像性能,推动当前人工智能能力的边界。

目前解决这一挑战的方法主要是使用无分类器引导(CFG),它使用无条件模型来引导有条件模型。虽然 CFG 改善了提示对齐和图像质量,但降低了图像变化。这种权衡发生在图像质量和变化的影响在本质上是纠缠在一起的,难以独立控制它们。此外,CFG 局限于有条件生成,并存在任务差异问题,导致图像构成的偏斜和过于简化的图像。这些限制影响了方法的性能,并限制了它在生成多样化和高质量图像方面的应用。

NVIDIA 的研究人员提出了一种名为自动引导的新方法,它涉及使用主模型的规模较小、训练时间较短的版本来引导生成过程,而不是使用无条件模型。这种方法通过将图像质量与变化解耦,从而更好地控制这些方面,同时保持与主模型相同的条件,确保生成图像的一致性。这种创新方法显著提高了图像生成的质量和变化,在 ImageNet-512和 ImageNet-64等基准测试中刷新了记录,可以应用于有条件和无条件模型。

该方法的核心是训练主模型的规模较小、训练时间较短的引导模型。论文详细介绍了去噪扩散过程,通过反转随机损坏过程生成合成图像。研究人员使用 Fréchet Inception Distance(FID)和 FDDINOv2等指标对模型进行评估,结果显示图像生成质量有了显著提高。例如,在 ImageNet-512中使用小模型(EDM2-S),自动引导将 FID 从2.56提高到1.34,超越了现有方法。

广泛的定量结果证明了自动引导的有效性。该方法在公开可用的网络上实现了64×64和512×512图像分辨率的 FID 记录,表明图像质量有了显著提升,而没有牺牲多样性。评估包括比较不同方法的表格,展示了自动引导在 CFG 和其他基线方法上的优越性能。例如,该方法在 ImageNet 数据集上实现了87.5% 的准确率,超过了先前的最先进水平。

这种改进扩散模型中图像质量的新方法涉及使用模型的规模较小、训练时间较短的引导模型。所提出的自动引导方法克服了像 CFG 这样的现有方法的局限性。这种创新方法在基准测试中取得了最先进的成绩,显著推进了人工智能研究领域,为生成高质量和多样化图像提供了更高效、更有效的解决方案。

(责任编辑:资讯)

相关内容
  • 12306回应高铁超载:不建议买短补长 补票需要咨询列车员
  • 下一个OpenAI来了?Mistral超大杯模型直逼GPT-4,93年创始人6人公司被微软认领
  • 汤姆猫:类Sora工具将有助于公司低成本打造AI应用
  • 谷歌发布基础世界模型Genie:11B参数,单张图生成可交互的虚拟世界
  • 英特尔正打造价值数十亿美元的人工智能加速器业务
  • 天涯社区被申请破产 被执行总金额超1051万元
  • 10元3副耳钉被仅退款商家千里讨公道 双方最终达成和解
  • 史上最贵Air平板!苹果12.9英寸巨屏iPad Air价格曝光
推荐内容
  • 景区公厕需扫码才能进?游客傻眼 官方回应:将协商改进
  • 专家称房价越涨人们购买意愿越强:几代人的积蓄都投入房产中
  • 英伟达成立最壕AI实验室 专攻具身智能研究
  • iPhone精织斜纹保护套收广泛差评:售价479元 主打环保
  • Mastercard推出新AI模型“Decision Intelligence Pro”以提升网络内欺诈检测
  • 网红大雪人开启年假模式:跟大家说再见了