会员登录 - 用户注册 - 设为首页 - 加入收藏 - 网站地图 对标Sora?国产公司推文生视频工具Etna 能生成15秒4K视频!

对标Sora?国产公司推文生视频工具Etna 能生成15秒4K视频

时间:2024-07-02 04:15:23 来源:带水拖泥网 作者:业界 阅读:230次

对标Sora?国产公司推文生视频工具Etna 能生成15秒4K视频

要点:

  • 国产公司推出的对标AI视频技术实现了15秒4K60帧超逼真效果,与小米、国产公司快手合作瞄准500亿美元的推文短剧出海市场。

  • Etna模型作为成功复现Sora技术的生视生成视频重要成果之一,采用Diffusion Transformer处理不同维度数据,频工实现了时长、对标清晰度、国产公司细节丰富度和语义理解的推文优势。

  • 七火山公司布局全产业链,生视生成视频通过AI多模态产品如Etna、频工Lava、对标miniTV和Bromo,国产公司改造短视频全产业链,推文受到资本市场的生视生成视频关注和青睐。

CSS站长资源(ChinaZ.com)3月14日 消息:随着国产公司推出的频工AI视频技术的崛起,短剧市场迎来了新的变革。七火山公司在国内率先复现了Sora的成果,并通过Etna模型等创新技术取得了重大突破。

Etna模型采用了Diffusion Transformer处理视频数据,实现了15秒4K60帧的超高清晰度,同时具备了时空理解能力和深度语义理解能力。

官网地址:https://top.aibase.com/tool/etna

论文地址:https://arxiv.org/pdf/2212.09748.pdf

从上图可以看出,相较于市场上的现有模型,Etna在时长、高清晰度、丰富生动细节和强语义理解上,都保持着较大优势。

为什么七火山能成为国内率先复现出Sora的公司?Sora的关键创新,是一个可以灵活地处理不同维度数据的Diffusion Transformer。时空压缩器会把原始视频转映射到潜空间中,视觉Transformer(ViT)模型会对已经被分词的潜表征进行处理,并输出去除噪声后的潜表征。

一个与CLIP模型类似的系统根据用户的指令(已经通过大语言模型进行了增强)和潜视觉提示,引导扩散模型生成具有特定风格或主题的视频。经过多次去噪处理之后,会得到生成视频的潜表征,然后通过相应的解码器映射回像素空间。

在相关领域技术积累的基础上,Etna模型迅速抓住了Sora的精髓,另外还引入了几项创新。技术架构创新主要是针对视频的时空特性提出的挑战,如何从空间和时间上将视频压缩到潜空间,以实现高效去噪,如何将压缩潜空间转换为patches,并将其输入到Transformer中,以及如何处理长距离的时空依赖性,并确保内容的一致性。

为此,Etna模型在主干网络上采用了Diffusion架构,同时在一个更大的数据集上实验和适配与Sora相似的Diffusion+Transform架构。融合了Diffusion模型和Transformer模型的优势,Etna形成了一种高效且先进的新型模型架构,提升了模型的生成效率,保证了生成内容的高质量和高一致性。

七火山公司不仅布局了AI多模态产品,还与小米、快手等合作伙伴展开战略合作,共同探索短剧出海市场。

资本市场对七火山公司的发展充满了期待,认为其具备了潜在的成长空间和投资价值。AI视频技术的兴起将颠覆整个短视频产业链,为用户带来全新的观影体验,也为产业链上下游企业带来了更多的商机和发展空间。

(责任编辑:资讯)

相关内容
  • 苹果宣布将在今年公布新的AI功能 去年已创建大模型Ajax
  • 手握 793亿现金!任天堂成为日本最有钱公司
  • 努比亚折叠屏手机通过认证 搭载骁龙8 Gen3
  • 春晚观众中60万华为“全家桶”大奖!结果屏蔽客服电话 京东喊话催领奖
  • 安徽男子开小飞机带女儿回家过年:是飞行教员 比开车快2个多小时
  • Keyframer官网体验入口 苹果AI动画生成工具免费在线使用地址
  • 小米平板网速!小米平板6S Pro首发Wi-Fi 7
  • AI生成的西游记短片震惊网友 博主:借助AI技术一周完成
推荐内容
  • 一高铁因超载无法运行 网友:这场景只有春运才能见到吧
  • 大数据智能化创新应用精准赋能 淄博打造交通管理数字化转型新范本
  • AI短视频创作变现软件工具app免费试用地址 创作猫体验入口
  • 女孩误喝防冻液医生开5瓶白酒解毒 多器官一度衰竭
  • 胖东来回应一件羽绒服仅赚3毛:价格透明 严禁虚加价
  • RNN模型挑战Transformer统治地位 Eagle 7B模型登顶多语言基准测试