AI视频生成迎来“GPT时刻”,Sora火爆全球

seekdeep2年前AI资讯676

继Runway、Pika、字节PixelDance、万兴“天幕”发布,2月16日凌晨,“王炸”模型Sora横空出世,AI视频生成迎来“GPT时刻”。


在Open AI公布的48个样片中,Sora展现出令人惊叹的视频生成效果,视频时长提升至1分钟,生成的角色表情逼真,还实现了多角度镜头切换与流畅分镜,可展现真实光影、运动和镜头移动效果。


据了解,Sora是一个扩散Transformer模型,通过采用Diffusion Transformer等技术处理不同持续时间、分辨率和比例的视频/图像,实现“世界模拟器”,达到理解真实世界的运动和物理能力。


对比Runway、Pika等玩家,Sora的特别之处在于,它能够理解和模拟真实世界,从而生成符合物理和运动学规律的复杂场景的超逼真视频。例如,当Sora学习人吃汉堡的视频时,它记住的不仅是吃汉堡这一“具体画面”,还有“咬了就会有痕迹”这个“物理规律”,让AI生成的视频更真实。


业内人士指出,世界模拟器是AI生成视频的一种方式,它的成功会带动视频生成赛道的发展,加速视频生成的创新和成熟。




面对AI视频生成领域的广阔前景,国内各厂商正加大投入,推动AI视频生成进入全新时代。字节跳动于去年11月发布PixelDance模型,不仅在视频时长上实现了突破,还可通过描述(纯文本)+首帧指导(图片)+尾帧指导(图片),生成包含复杂场景和动作的视频,用上一个视频片段尾帧为下一个视频头帧提供指导思路。


AIGC软件A股上市公司万兴科技(300624.SZ)于今年年初推出国内首个以音视频为核心的多媒体大模型万兴“天幕”。作为一家产品创新型公司,万兴科技很早就拥抱AIGC,是首批开通Azure OpenAI商用服务权限的国内企业,旗下Wondershare Filmora、万兴PDF、亿图图示等软件已进行AIGC化升级,并推出万兴播爆、万兴智演、Wondershare Kwicut等AIGC新品。


伴随Sora发布,作为音视频多媒体垂类大模型的开拓者,万兴“天幕”备受关注,但据了解,其与Sora在定位、能力、用户群等方面具有一定的差异化。定位上,万兴“天幕”是音视频多媒体创作垂类大模型,由视频大模型、音频大模型、图片大模型、语言大模型组成,Sora则是基于视觉数据的底层通用模型,相当于视频领域的Midjourney;能力上,万兴“天幕”涵盖当前市面上语言、音频、图像的大模型能力,Sora核心的文生视频能力,是万兴“天幕”的原子能力之一;用户方面,与Sora偏向影视公司或专业机构不同,万兴“天幕”面向更细分垂直的市场,包括泛知识、泛营销、泛娱乐等领域,相关能力已在海外规模化商用。


AI视频生成赛道前景广阔。数据显示,截至2023年末,仅国内短视频用户规模已突破10亿人,不谈增量市场可能带来的红利,仅仅为这10多亿用户提供AI视频创意服务,就有大量文章可做。


在业内人士看来,Sora是AGI(通用人工智能)实现的重要里程碑,一方面,Sora的出现将全球目光聚焦于视频生成领域,验证了视频为王的趋势,也进一步验证了无视频不传播的时代,“视频+大模型”的应用市场空间扩展。


对于Sora是否会一家独大,对相关AI视频生成模型或厂家形成冲击。业内人士认为,参考此前ChatGPT掀起的大语言模型热潮,在ChatGPT爆红后,全球大语言模型不仅没有出现一家独大的情况,反而随着Google、Meta、英伟达,以及百度、阿里、华为等公司的入场,呈现百花齐放态势,仅国内的大语言模型数量就早已超过百家。展望行业未来,Sora对于视频大模型领域的推动作用也令人期待。


另一方面,一个大模型无法解决全世界的问题。伴随全球算力需求爆发式增长,大模型正从全球化走向本土,算力本地布局、更本土化的数据、更本土化的应用是大势所趋。例如,在Open AI发布的Demo视频“与中国龙一起庆祝农历新年”中,Sora就无法准确生成视频画面中的中文。




日前,国泰君安证券发布研报称,Sora模型推动AI多模态领域飞跃式发展,AI创作等相关领域将迎来深度变革,AI赋能范围进一步扩大,推荐万兴科技、金山办公、科大讯飞、虹软科技等标的。


一年前,ChatGPT以迅雷不及掩耳之势走向全球,为文本创作领域带来重大变革,并掀起了全球范围内的“百模大战”。


一年后的今天,Sora到来,AI视频生成赛道或许迎来一个新的“ChatGPT时刻”,多模态大模型的升维竞赛有望打响,AI视频生成的技术和产品有望加速爆发。


相关文章

争夺“中国ChatGPT”心智定位,零一万物首次出新To C 李开复再出马!

李开复表示,大模型推理成本的下降会推动中国AI大模型进入”落地为王”的阶段,今年会迎来“大模型应用爆发元年”。他同时预测,明年下半年,随着大模型推理成本的大幅度下降,人们将迎来大模型普惠应用的井喷期。...

应用场景尚待深化,部署DeepSeek 银行大模型矩阵扩容!

  在现有大模型矩阵引入DeepSeek的银行,数量还在增加。截至记者发稿前,除了工行、邮储、建行、招行、浦发等大中型银行,一些地方中小银行、互联网银行也在加快部署DeepSeek大模型,推进其在智能...

GPT商店涌入AI女友机器人,审核和盈利前景尚待明确

·点击聊天机器人“虚拟甜心”,用户将收到诸如“你的梦想女孩是什么样子?”“与我分享你最黑暗的秘密”之类的启动提示。·在经济环境严峻的情况下,制造聊天机器人的公司最近却一直在以惊人的速度筹集资金。但仍不...

马斯克为何要全力炮轰:苹果系统接入ChatGPT

苹果在全球开发者大会(WWDC 24)推出Apple Intelligence(苹果智能),并表示将与OpenAI合作,ChatGPT将整合到包括新一代iOS、iPadOS以及macOS中。对隐私的高...

最大参数超 1400 亿,2 名核心团队成员却离职,Llama 3 被爆 7 月解禁剑指 GPT-4。

Meta 将推出 Llama 3 大模型,性能超 Llama 2。【导读】外媒称,Llama 3 或将在 7 月发布,并解除了一些限制能回答更棘手的问题,而且对多重语境理解更加到位,至于是否有多模态能...

揭示二叠纪大灭绝秘密 , AI助力科研!

二叠纪末大灭绝是地球历史上最惨烈的生物灾难之一,约80%的海洋生物和大量陆地生物消失。然而,最新研究发现,在新疆吐哈盆地南桃东沟地区,却存在着一个神奇的陆地'避难所',这里的植被和生态...