会员登录 - 用户注册 - 设为首页 - 加入收藏 - 网站地图 腾讯开源人像照片生成视频模型V-Express!

腾讯开源人像照片生成视频模型V-Express

时间:2024-07-02 04:02:42 来源:带水拖泥网 作者:知识 阅读:931次

腾讯开源人像照片生成视频模型V-Express

CSS站长资源(ChinaZ.com)6月7日 消息:腾讯公司开源了一款创新的腾讯模型V-Express,它能够使用人像照片生成视频。开源这一技术通过一系列逐步丢弃的人像操作来平衡不同控制信号,使得音频等较弱的照片信号得以有效利用,实现对姿态、生成视频输入图像和音频的模型综合控制。

作者团队表示,腾讯在会说话的开源人脸生成任务中,当目标视频与参考角色不是人像同一个人时,选择与参考人脸姿势更相似的照片目标视频将能获得更好的效果。目前,生成视频该模型在英语上的模型表现较为出色,但对其他语言的腾讯适应性和表现尚未经过详细测试。

V-Express模型的开源开源,为肖像视频生成领域带来了新的人像发展机遇。在这一领域,使用单个图像生成视频的方法正变得日益流行。这通常涉及到使用生成模型增强适配器来实现受控生成,其中控制信号可能包括文本、音频、图像参考、姿势、深度图等。V-Express通过渐进式的丢弃操作,解决了弱信号在强信号干扰下难以发挥作用的问题,尤其是在音频信号常常被姿势和原始图像等强信号掩盖的情况下。

实验结果显示,V-Express能够有效生成受音频控制的肖像视频,这在以往的研究中是一个难以实现的突破。V-Express方法的逐步丢弃操作,不仅有效实现了对弱条件的控制,而且为多条件生成提供了新的可能性和思路。

V-Express模型为肖像视频生成领域带来了创新的思路和方法,通过平衡不同强度的控制信号,成功实现了受音频控制的视频生成。这一成果不仅具有重要的理论和实践意义,而且为未来的多条件生成提供了新的路径。腾讯表示,将继续深入研究V-Express方法,并探索其在更广泛领域的应用,以促进肖像视频生成领域的进一步发展。

项目地址:https://top.aibase.com/tool/v-express

(责任编辑:资讯)

相关内容
  • 微信更新了几个视频号新功能!
  • 英国国王查尔斯三世确诊癌症:刚刚加冕半年
  • Kimi Chat背后模型月之暗面moonshot正式开放API申请
  • 卡梅隆称已经构思到了《阿凡达7》!第三部已在制作:明年上映
  • Coze扣子体验入口 字节跳动无代码AI聊天机器人开发平台免费在线使用地址
  • 春节租车市场火爆!预订量暴增200%:“95后”订单超四成
  • 报告:数据质量是实施生成式人工智能的障碍
  • 爸妈吐槽大学生要提前吃光全家年货 学生:越看越想吃
推荐内容
  • 还坚持4G吗!工信部公布5G手机用户平均下载速率 你达标没
  • 脱口秀演员杨波言论引争议:头孢配酒一点事没有吗 谣言
  • 大众官宣:与小鹏合作开发的新车型将在2026年投产
  • 马斯克母亲逛上海豫园 在抖音等平台开设账号
  • 小米召开年度质量奖表彰大会:Redmi产品质量提升专项获得集团二等奖
  • 腐乳变“东方奶酪”:在海外卖爆了