比Gemini Pro1.5强!可解读视频的多模态模型Pegasus-1公测
划重点:
🌟 Pegasus-1是解读视频语言基础模型,迎来升级!
🌟 模型性能在多个任务中取得显著成就。视频
🌟 通过数据优化、模态模型视频处理和训练技术提升,公测刷新视频理解标准。解读
CSS站长资源(ChinaZ.com)4月25日 消息:Twelve Labs 最新发布了 Pegasus-1的视频公测版本,这款视频 - 语言基础模型在视频理解领域取得了新突破。模态模型
Pegasus-1是公测一款具有约17亿参数的视频 - 语言模型,能够以卓越的解读准确性和细节处理能力从视频输入中生成语言描述。据称,视频Pegasus-1视频解读能力比Gemini Pro1.5还要强,模态模型通过优质数据、公测优化视频处理和精细训练等升级,解读提供卓越的视频视频理解和生成文本能力。在视频总结、模态模型问题回答和对话方面表现卓越。
产品特色功能包括:
- 数据优化:高质量数据驱动模型表现,100,000个高质量视频 - 文本对训练带来强大基础视频理解能力。
- 视频处理提升:优化空间和时间分辨率,使 Pegasus-1能更好地捕捉视频信息。
- 训练技术改进:多阶段训练避免灾难性遗忘,使模型在细节、世界知识和时间理解等方面大幅提升。
在基准测试中,Pegasus-1在视频问答、对话和摘要等任务中胜过谷歌 Gemini Pro 等现有模型,展现出卓越的性能。无论是零样本表现还是广泛泛化能力,Pegasus-1都站在行业前沿,为视频理解任务设立新标杆。
然而,仍需关注模型安全性、视频长度限制和偶发幻觉等方面的改进空间。Pegasus-1的不断进化与创新,为视频理解技术开辟新的可能性。值得一提的是,Pegasus-1未开源,通过API使用
产品入口:https://top.aibase.com/tool/pegasus-1
API文档:https://docs.twelvelabs.io/docs/generate-text-from-video
(责任编辑:短视频)
- ·美邦创始人:亏损责任不在我女儿 自己将全面参与经营
- ·年轻人就想安安稳稳怎么办 董明珠:给躺平的人合适的岗位 发挥长处很重要
- ·故意降低iPhone性能!苹果在加拿大赔偿 每人给千元:国内用户对苹果太仁慈
- ·库克带货全新M3版MacBook Air:难以置信的轻薄便携设计
- ·五角大楼启动2.4万元AI赏金计划,寻找偏见证据
- ·睡前玩8分钟手机 能让身体兴奋1小时!还会“变丑”
- ·小米卢伟冰:AI是未来 但AI手机是噱头
- ·苹果长文“回怼”欧盟140亿巨额罚单 人工智能「iOS应用」有哪些?
- ·OnePlus11 和 12 手机将迎来人工智能功能更新
- ·只需几十元,用AI“复活”亲人,是慰藉还是自欺欺人?
- ·小红书开源「InstantID」效果炸裂,被Yann LeCun点赞,迅速蹿上Github热榜
- ·男子高速上突遇逆行车辆 吓出一身冷汗:感觉与死神擦肩而过
- ·全球天玑9300平板!vivo Pad3系列来了
- ·纽北最速电动轿跑!保时捷将推全新Taycan车型:3月11日发布
- ·每月1.6亿流量还在涨,人类社交行为正在被AI改变?
- ·加入华为纯血鸿蒙!百度地图HarmonyOS NEXT版地图SDK即将上线
- ·新浪又要亲自下场做游戏了
- ·董明珠:建议严厉打击造黄谣等网暴行为 负能量传递
- ·营收占比 7%,库克谈欧洲App Store新规:竭尽所能保护用户隐私
- ·Prompt Library官网体验入口 Claude 3官方提示词库免费使用地址