2024视频大模型最新进展如何？

发布日期：2024-09-19 14:17

来源类型：老鸟游吧 | 作者：亓昊楠

【澳门金牛版正版资料大全免费】【新澳开奖记录今天结果】【2024年新澳门王中王资料】【管家婆最准一肖一码】【新澳彩开奖结果查询】【澳门2021年结果+记录】【4949澳门免费资料大全特色】【2024今晚澳门特马开什么号】【2020年澳门现场直播视频】【2O24澳彩管家婆资料传真】

【494949澳门今晚开什么】【2024新澳免费资料】 【下载澳彩图库的注意事项有哪些】

今天分享的是：2024视频大模型最新进展如何？

《2024视频大模型最新进展如何？》由财通证券发布，对视频大模型的技术发展思路、最新进展以及应用进行了研究。

报告主要内容包括以下几个方面：

- OpenAI视频大模型技术发展思路：Sora团队的负责人在2024智源大会开幕式分享多模态大模型领域近年来的发展历程以及未来的前进方向。DALL.E通过压缩数据可以实现学习，但仅仅压缩并不能通向AGI；CLIP从在视觉世界学习过程中介入自然语言指导，与单纯压缩数据相比计算效率将显著提升；DALL·E 3增强训练文本的描述性，训练文生图模型的效率也会更高，即使在推理时无法使用具有描述性的文本，也可以使用具有较强描述性的文本作为训练的框架得到更好的无条件模型；视觉上下文学习可能是实现通往所有类型应用的一条可行路径。

- 视频大模型最新进展：Adobe Firefly新增生成式扩展功能，生成音频和视频功能即将推出，Adobe Express发布音频生成动画功能，为C端提供便捷的口播视频制作工具；美图构建AI短片工作流，提升AI生成可控性，加速文生视频商业化落地；Filmora上线13.5版本，AI功能持续更新，携手英伟达开启全新视频视觉体验；Luma AI发布Dream Machine，实现较高质量的文生视频、图生视频；快手发布可灵大模型，技术路线类似Sora；Pika再融资5.8亿人民币，已构建起AI视频生成基础模型；Runway更新Gen-2多重运动画笔功能，提升视频可控性，获得D轮融资，与谷歌合作进一步加深。

- 文生视频大模型试用对比：头部主流视频大模型已具备商用潜力，生成效果差异较大。我们选取了已开发试用的头部视频大模型产品，在相同prompt下进行测试，结果显示Luma、Pika、Runway视频大模型效果相比2023年文生视频刚刚兴起的阶段已有大幅提升，主要体现在场景更稳定、动作幅度更大、可调整参数更多。总体来讲，头部主流视频大模型已具备商用潜力，且风格、效果差异较大，我们认为视频大模型在广告、游戏、电影创作等场景有极大的应用空间，未来在垂类风格具备优势的厂商将率先实现商业化。