FreeControl:无需训练即可控制任何文本到图像扩散模型的空间控制方法
划重点:
⭐️ FreeControl 提供一种无需训练即可控制任何文本到图像扩散模型的需训空间控制方法
⭐️ 支持多个条件、架构和检查点同时进行控制生成
⭐️ 通过结构和外观引导,练即实现对生成图像的可控扩散控制
CSS站长资源(ChinaZ.com)2月21日 消息:在最新的研究中,研究人员提出了一种名为 FreeControl 的制任制方方法,可以实现对文本到图像生成模型的何文空间控制,而无需进行训练。图像这项研究支持同时控制多个条件、模型架构和检查点,间控为生成过程提供了更大的需训灵活性。通过结构引导和外观引导,练即FreeControl 能够促进生成图像与指导图像的可控扩散结构对齐,以及在具有和不具有控制的制任制方情况下生成的图像之间的外观对齐。
FreeControl 方法包括分析阶段和合成阶段。何文在分析阶段,图像FreeControl 通过查询文本到图像模型生成尽少一张种子图像,模型然后从生成的图像中构建线性特征子空间。在合成阶段,FreeControl 利用子空间中的引导来促进与指导图像的结构对齐,以及在有控制和无控制情况下生成的图像之间的外观对齐。
研究人员展示了使用 T2I 扩散模型进行可控生成的定性结果。他们展示了支持任何条件生成的能力,并通过提供代码和相关工作的引用,展示了 FreeControl 方法的有效性和广泛适用性。
FreeControl 有助于对许多不同的架构和检查点进行方便的免训练控制,允许大多数现有免训练方法失败的具有挑战性的输入条件,并通过基于训练的方法实现有竞争力的合成质量。
项目网址:https://top.aibase.com/tool/freecontrol
论文网址:https://arxiv.org/pdf/2312.07536.pdf
(责任编辑:自媒体)
- ·给北方人一些回南天的震撼:屋内变水帘洞 墙壁会流泪
- ·全球天玑9400旗舰!vivo X200首度曝光
- ·疯产姐妹 回来了但没完全回来:粉丝表示充满期待
- ·为了教会你如何写AI绘画提示词 谷歌推出了这款游戏
- ·苹果中国营收暴降:iPhone确实不好卖了 华为OV小米等逆袭
- ·拼多多发布2024年Q1财报:营收868亿元 同比大涨131%
- ·12306 App爱心版宣布更名敬老版:一键电话订票 功能布局更丰富
- ·Gabby World V2:融合AI和区块链技术的全新龙与地下城风格游戏问世
- ·OLMo官网体验入口 开源AI语言模型框架免费下载地址
- ·开了9年的迈巴赫值不值990万 周鸿祎亲自为网友算这笔账
- ·工人从长江大桥桥顶释放铁环除冰 确保桥面通行安全顺畅
- ·大模型数据标注平台Scale AI融资10亿美元,估值达138亿美元
- ·周鸿祎捐赠迈巴赫车款!二手车老板受感动:拿出1000万做公益
- ·索尼神秘新机Xperia Pro-C详细规格曝光 骁龙8 Gen3加持
- ·超越微软、亚马逊:苹果连续17年蝉联“全球最受赞赏公司”榜首
- ·百万粉丝网红王红权星被各社交平台封禁:靠炫富走红
- ·「豆包」拉低价格线 全球大模型开卷性价比
- ·iPhone 16 Pro Max首发全新窄边框技术:屏占比创苹果新高
- ·Coze 扣子怎么用?如何将搭建的chatbot发布到公众号?
- ·B站UP主花式整活:为了教你学英语 AI都开始讲谐音梗了