会员登录 - 用户注册 - 设为首页 - 加入收藏 - 网站地图 I2VEdit:修改单帧即可编辑整个视频 搞定虚拟试妆、风格转换!

I2VEdit:修改单帧即可编辑整个视频 搞定虚拟试妆、风格转换

时间:2024-07-02 04:01:32 来源:带水拖泥网 作者:小程序 阅读:715次

I2VEdit:修改单帧即可编辑整个视频 搞定虚拟试妆、风格转换

划重点:

⭐️ 利用预训练的修改虚拟图像到视频模型,编辑单帧就能扩散到整个视频

⭐️ 包括粗略运动提取和外观细化两个关键过程

⭐️保持外观和运动与原始视频的单帧一致性,减少质量损失的编辑跳跃间隔策略

CSS站长资源(ChinaZ.com)5月29日 消息:近年来,扩散模型在图像和视频编辑方面的整个转换出色生成能力引发了广泛研究。与图像编辑相比,视频试妆视频编辑在时间维度上面临额外挑战,搞定而图像编辑已经见证了更多种类、风格高质量方法以及像 Photoshop 这样更强大的修改虚拟软件的发展。

针对这一差距,单帧研究人员引入了一种新颖且通用的编辑解决方案,通过使用预训练的整个转换图像到视频模型,将图像编辑工具的视频试妆适用范围扩展到视频中,并将编辑从单帧传播到整个视频。搞定他们的风格方法被称为 I2VEdit,能够根据编辑的修改虚拟程度自适应地保留源视频的视觉和运动完整性,有效处理全局编辑、局部编辑和适度形状变化,而现有方法无法完全实现。

产品入口:https://top.aibase.com/tool/i2vedit

该方法的核心包括两个主要过程:粗略运动提取,用于将基本运动模式与原始视频进行对齐;外观细化,用于使用细粒度的注意力匹配进行精确调整。

他们还结合了跳帧策略,以减轻跨多个视频剪辑的自回归生成带来的质量下降。实验结果表明,他们的框架在细粒度视频编辑方面表现出卓越性能,证明了其产生高质量、时间上连贯的输出的能力。

在应用上,I2VEdit可以实现视频编辑多种牛逼的视觉效果,比如:

虚拟试穿,使用 I2VEdit可以让虚拟试穿上升到新的高度,编辑源视频中的可穿戴对象。

主题替换,可以替换源视频的主题。

风格转换,使用 I2VEdit,可以更改源视频的风格。

(责任编辑:短视频)

相关内容
  • 匿名论文提出奇招,增强大模型长文本能力居然还能这么做
  • 349元!小米800万像素智能摄像机C700发布:4K画质
  • 制造星野:穿越平行时空和次元壁,揭秘 MiniMax 的另类 AI 世界
  • 太阳耀斑或达级别 影响健康吗?专家:这类群体需特别关注
  • Wetab体验入口 个性化浏览器新标签页小组件免费使用地址
  • 大连一烤肉店用玉米粒作燃料 官方回应:不提倡
  • 华为提供引擎技术 光场屏全面上市:汽车变影院
  • 微软迈入AI大模型竞赛,推出MAI-1挑战谷歌与OpenAI
推荐内容
  • 1月销量超20万台 比亚迪各车型数据出炉:海鸥成品牌
  • Opera 的 AI 助手现在可以总结 Android 上的网页
  • 麻省理工分享ChatGPT,在教育的5个实际应用案例
  • 小龙虾很脏是误解 专家:小龙虾对水质有要求
  • Bard推出图片生成功能 由Imagen 2图像生成模型提供支持
  • 报道称微软准备推新AI模型,内部代号MAI-1、约5000亿参数