NVIDIA 自动引导技术:改善扩散模型中的图像质量和变化
划重点:
- 💡 NVIDIA 提出的自动中的质量自动引导方法在扩散模型中使用较小的模型来引导生成过程,显著改善了图像生成的引导质量和多样性。
- 💡 通过自动引导方法,技术研究人员在 ImageNet-512和 ImageNet-64等基准测试中取得了新的改善记录成绩,实现了对图像生成质量的扩散显著提升。
- 💡 这一创新方法在解决当前方法存在的模型局限性的同时,为生成高质量和多样化图像提供了更高效、图像更有效的和变化解决方案。
CSS站长资源(ChinaZ.com)6月7日 消息:NVIDIA 近期提出了一种名为自动引导的自动中的质量新方法,旨在改善扩散模型中图像的引导质量和变化,而不影响其与给定条件(如类标签或文本提示)的技术一致性。当前的改善方法通常会以牺牲多样性为代价来提高图像质量,从而限制了它们在医学诊断和自动驾驶等各种现实场景中的扩散适用性。然而,模型克服这一挑战可以提升人工智能系统在生成逼真且多样化图像方面的图像性能,推动当前人工智能能力的边界。
目前解决这一挑战的方法主要是使用无分类器引导(CFG),它使用无条件模型来引导有条件模型。虽然 CFG 改善了提示对齐和图像质量,但降低了图像变化。这种权衡发生在图像质量和变化的影响在本质上是纠缠在一起的,难以独立控制它们。此外,CFG 局限于有条件生成,并存在任务差异问题,导致图像构成的偏斜和过于简化的图像。这些限制影响了方法的性能,并限制了它在生成多样化和高质量图像方面的应用。
NVIDIA 的研究人员提出了一种名为自动引导的新方法,它涉及使用主模型的规模较小、训练时间较短的版本来引导生成过程,而不是使用无条件模型。这种方法通过将图像质量与变化解耦,从而更好地控制这些方面,同时保持与主模型相同的条件,确保生成图像的一致性。这种创新方法显著提高了图像生成的质量和变化,在 ImageNet-512和 ImageNet-64等基准测试中刷新了记录,可以应用于有条件和无条件模型。
该方法的核心是训练主模型的规模较小、训练时间较短的引导模型。论文详细介绍了去噪扩散过程,通过反转随机损坏过程生成合成图像。研究人员使用 Fréchet Inception Distance(FID)和 FDDINOv2等指标对模型进行评估,结果显示图像生成质量有了显著提高。例如,在 ImageNet-512中使用小模型(EDM2-S),自动引导将 FID 从2.56提高到1.34,超越了现有方法。
广泛的定量结果证明了自动引导的有效性。该方法在公开可用的网络上实现了64×64和512×512图像分辨率的 FID 记录,表明图像质量有了显著提升,而没有牺牲多样性。评估包括比较不同方法的表格,展示了自动引导在 CFG 和其他基线方法上的优越性能。例如,该方法在 ImageNet 数据集上实现了87.5% 的准确率,超过了先前的最先进水平。
这种改进扩散模型中图像质量的新方法涉及使用模型的规模较小、训练时间较短的引导模型。所提出的自动引导方法克服了像 CFG 这样的现有方法的局限性。这种创新方法在基准测试中取得了最先进的成绩,显著推进了人工智能研究领域,为生成高质量和多样化图像提供了更高效、更有效的解决方案。
(责任编辑:资讯)
- ·淘宝的广告,在朋友圈杀疯了
- ·StickerBaker官网体验入口 AI贴纸生成工具软件免费在线使用地址
- ·同档影像!真我12 Pro 发布:1599元起
- ·Mistral Small官网体验入口 低延迟优化新型AI模型下载地址
- ·反转与否不重要!《人民日报》评奔驰车男子:打砸引擎盖就是错 路怒损人害己
- ·FindSD.art官网体验入口 AI查找CivitAI类似风格SD模型软件工具免费使用地址
- ·傻瓜式操作!开源贴纸制作工具StickerBaker 输入关键词就能生成卡通贴纸
- ·阿里通义实验室开源多模态说话人项目3D-Speaker
- ·婚宴遇大雪宾客在猪圈里吃席 宾客:比淋雪要舒适得多
- ·Meta在欧洲建立选举运营中心检查AI内容
- ·捕捞出售违法!比利时设陷阱诱捕300万只大闸蟹:破坏河道威胁生态 老外不吃
- ·爆火的秦岭隧道视频系拼接 作者道歉:犯了知识性错误
- ·努比亚音乐手机发布:后置圆形大喇叭、配双3.5mm耳机孔
- ·蔚来李斌自曝年薪不到百万 出差也是400元的酒店标准
- ·2亿年终奖用G3手机抵扣?格力回应:消息不实
- ·Stable-Diffusion官网体验入口 AI图像生成器中文版免费在线使用地址
- ·微软研究!无需训练即可融合多个Lora且保留了效果
- ·下一个OpenAI来了?Mistral超大杯模型直逼GPT-4,93年创始人6人公司被微软认领
- ·专访椰树 | 一年播放10亿,我是如何打造爆款直播间
- ·Meta 在关键的欧盟选举之前加大打击虚假信息的力度