对标Sora?国产公司推文生视频工具Etna 能生成15秒4K视频
要点:
国产公司推出的对标AI视频技术实现了15秒4K60帧超逼真效果,与小米、国产公司快手合作瞄准500亿美元的推文短剧出海市场。
Etna模型作为成功复现Sora技术的生视生成视频重要成果之一,采用Diffusion Transformer处理不同维度数据,频工实现了时长、对标清晰度、国产公司细节丰富度和语义理解的推文优势。
七火山公司布局全产业链,生视生成视频通过AI多模态产品如Etna、频工Lava、对标miniTV和Bromo,国产公司改造短视频全产业链,推文受到资本市场的生视生成视频关注和青睐。
CSS站长资源(ChinaZ.com)3月14日 消息:随着国产公司推出的频工AI视频技术的崛起,短剧市场迎来了新的变革。七火山公司在国内率先复现了Sora的成果,并通过Etna模型等创新技术取得了重大突破。
Etna模型采用了Diffusion Transformer处理视频数据,实现了15秒4K60帧的超高清晰度,同时具备了时空理解能力和深度语义理解能力。
官网地址:https://top.aibase.com/tool/etna
论文地址:https://arxiv.org/pdf/2212.09748.pdf
从上图可以看出,相较于市场上的现有模型,Etna在时长、高清晰度、丰富生动细节和强语义理解上,都保持着较大优势。
为什么七火山能成为国内率先复现出Sora的公司?Sora的关键创新,是一个可以灵活地处理不同维度数据的Diffusion Transformer。时空压缩器会把原始视频转映射到潜空间中,视觉Transformer(ViT)模型会对已经被分词的潜表征进行处理,并输出去除噪声后的潜表征。
一个与CLIP模型类似的系统根据用户的指令(已经通过大语言模型进行了增强)和潜视觉提示,引导扩散模型生成具有特定风格或主题的视频。经过多次去噪处理之后,会得到生成视频的潜表征,然后通过相应的解码器映射回像素空间。
在相关领域技术积累的基础上,Etna模型迅速抓住了Sora的精髓,另外还引入了几项创新。技术架构创新主要是针对视频的时空特性提出的挑战,如何从空间和时间上将视频压缩到潜空间,以实现高效去噪,如何将压缩潜空间转换为patches,并将其输入到Transformer中,以及如何处理长距离的时空依赖性,并确保内容的一致性。
为此,Etna模型在主干网络上采用了Diffusion架构,同时在一个更大的数据集上实验和适配与Sora相似的Diffusion+Transform架构。融合了Diffusion模型和Transformer模型的优势,Etna形成了一种高效且先进的新型模型架构,提升了模型的生成效率,保证了生成内容的高质量和高一致性。
七火山公司不仅布局了AI多模态产品,还与小米、快手等合作伙伴展开战略合作,共同探索短剧出海市场。
资本市场对七火山公司的发展充满了期待,认为其具备了潜在的成长空间和投资价值。AI视频技术的兴起将颠覆整个短视频产业链,为用户带来全新的观影体验,也为产业链上下游企业带来了更多的商机和发展空间。
(责任编辑:资讯)
- ·胖东来在门口给顾客身上扫雪:工作人员全程面带微笑
- ·苹果因垄断行为被欧盟反垄断法罚款逾5亿美元
- ·AI视野:ElevenLabs将为Sora上线AI音效功能;文生图模型Stable Cascade上线;苹果推出AI动画设计工具Keyframer;AI生成的西游记短片震惊网友
- ·AI SORA TECH官网体验入口 AI文本生成视频工具软件app怎么使用
- ·PosterGPT官网体验入口 AI社交媒体内容生成工具自动发布平台
- ·AI短视频创作变现软件工具app免费试用地址 创作猫体验入口
- ·月之暗面AI聊天机器人APP下载地址 Kimi Chat网页版免费在线使用入口
- ·张楠宣布辞任抖音集团CEO 重心转向剪映AI辅助创作
- ·为什么高铁座椅没有E号上热搜 网友:抓去当视力表了
- ·“Sora概念股”一片红!视频再上强度,有人都开始复现了
- ·2B小钢炮碾压Mistral-7B,旗舰级端侧模型炸场开年黑马!1080Ti可训,170万tokens成本仅1元
- ·35分钟充满10000mAh大电池!小米平板6S Pro首发120W秒充
- ·文生视频大模型Sora引发热议:背后团队现身谢赛宁否认涉及
- ·美国商标局确认:OpenAI 无法申请 “GPT” 商标
- ·专家称调休时很多人在假装上班 长时间劳累或导致工作效率下降
- ·Meta发布全新AI自动剪辑视频工具Agents LAVE
- ·四天流水3万,“变美三件套”爆单
- ·200秒解析Sora:AI视频工具进步巨大可能对影视行业造成影响
- ·决战拜年之巅!你能经受住AI七大姑八大姨的灵魂拷问吗?
- ·开启手机大光圈双长焦时代!小米14 Ultra将搭载徕卡旗舰双长焦