国产太强了！AI大年夜模型最全盘点：可灵、即梦杀疯了__模子

2025-01-08 11:14:22 科技快讯

2024年上半年，AI***天生领域迎来了一系列令人瞩目的打破。

国产太强了！AI视频大年夜模型最全盘点：可灵、即梦杀疯了_视频_模子科技快讯

今年2月OpenAI发布了全新的文生***模型Sora，率先开启了AI***天生的ChatGPT时候；3月26日，字节跳动旗下剪映Dreamina开放内测；4月27日，AI企业生数科技发布了号称海内首个自研视比年夜模型的Vidu；6月6日，快手可灵AI正式开放内测......

AI***天生赛道在环球的高度关注下催生出一个又一个新技能成果，与此同时，国内外类Sora创企们也开始生动起来。
仅仅在今年上半年，爱诗科技、生数科技、Pika等AI企业就完成了多轮亿元级别的融资，成立于2018年的老牌AI***天生企业Runway也传出新一轮的融资操持。

海量资金加持下的AI***天生赛道必定会给我们带来更多惊喜，不过在此之前，借着这个年中时候，小雷带大家来一起回顾下今年上半年的AI视比年夜模型产品，看看各家大模型发布了哪些新产品，它们在产品方向又有了什么新变革。

Sora持续隐身，快手可灵AI火爆全网

1、Sora：引领***天生技能路线创新

说实话，说实话，将Sora置于产品行列步队中谈论并不得当，由于Sora至今也没有对"大众年夜众开放，只有业界和设计界的极少数人受邀利用。
但考虑到Sora的涌现推动了AI***天生技能在环球范围内的迈进，为了方便大家理解，小雷认为还是有必要对其进行回顾。

在OpenAI发布Sora模型之前，代表着行业领先水平的是Runway、Pika Labs，以及谷歌VideoPoet这一批老牌AI***天生玩家。
它们没有引起环球关注的最大缘故原由是天生***的技能难度非常高。

图源：Sora

制作***不仅须要依赖于前辈的算法和强大的打算能力，还必须办理包括同等性、连贯性、物理合理性以及逻辑合理性在内的多种繁芜问题。
这些成分共同确保了***内容的流畅性、真实性和可信度。

Runway们早期紧张依赖于GAN（天生式对抗网络）和VAE（变分自编码器）两种模型进行***天生，之后演化出两种技能路线，分别是扩散模型和Transformer模型，两者各具利害，可以说是各有千秋。

而根据OpenAI在发布Sora当天给出的技能阐明，Sora正是扩散模型和Transformer模型的结合。
虽然在Sora发布之前，结合方案已成为业内普遍考试测验的方向，但OpenAI作为首个发布Demo的企业，已经在AI***天生领域确立了行业地位。

按照目前情形来看，OpenAI丝毫没有公开Sora的意思。
在竞争日益加剧的AI***天生领域，Sora的持续隐身会给其他竞争对手带来追赶乃至超越的机会。

2、快手可灵AI：国产AI国外爆火，高频更新值得期待

在2024年天下人工智能大会（WAIC）上，快手高等副总裁于越先容了可灵AI的部分产品更新以及最新数据。
作为一款刚刚发布一个月的产品，可灵AI的更新可谓是相称频繁。
产品从内测时的App端，扩展到了Web端；功能也从文生***，陆续更新了图生***、***续写、多尺寸选择、高画质版、首尾帧掌握、镜头掌握等新功能。

据快手表露的数据显示，可灵大模型上线一个月以来，累计申请用户数50万+，开通用户数30万+，天生***数700万。
同时，可灵AI凭借大幅度运动的合理性和物理天下特性的高度仿照能力在国内外社交媒体和技能社区受到广泛谈论。

图源：可灵AI天生

不少外洋科技爱好者、专业从业者体验后纷纭表达了对中国AI的看好。
美国著名创业投资公司Y Combinator CEO在外洋社交媒体平台转发并夸奖了可灵天生的Demo；英国开源人工智能公司Stability AI前CEO Emad Mostaque则表示：“中国的AI技能有自己的上风。
”

自从OpenAI发布ChatGPT开始，大众普遍认为OpenAI代表着AIGC领域的领先水平。
哪怕Sora迟迟未上线，类似的不雅观点也没有太大改变。
但作为内测体验过可灵AI的亲历者，小雷可以明确表示可灵AI无论是天生时长、效率，还是***质量，都是目前AI***天生产品的第一梯队，尤其是真实风格场景上的表现令人印象深刻，许多AIGC***如果不细看，乃至无法创造是AI天生。

在Sora未正式发布前，外界很难判断孰优孰劣，但快手可灵AI的涌现让我们看到了在AI***天生领域超越的可能。
此外，快手方面还宣告其首部AIGC短剧《山海》将在本月上映，期待可灵AI给我们带来新的惊喜。

3、字节即梦AI：进步明显，AIGC短剧带来行业新机遇

同样试水AIGC短剧的还有即梦AI。
在今年的上海国际电影节上，抖音联合博纳影业出品制作的AIGC科幻短剧集《三星堆：未来启迪录》正式亮相。

纯AI制作是该剧的最大亮点，借助包括AIGC剧本创作、观点及分镜设计、图像到***转换、***编辑和媒体内容增强等十种AIGC技能，或将解锁传统影视公司与AIGC技能产品互助、发展的新路径。

图源：即梦AI天生

即梦AI是字节旗下的一站式AIGC内容专业创作平台，支持文生***和图生***，供应智能画布、故事创作模式、以及首尾帧、对口型、运镜掌握、速率掌握等AI编辑功能。

今年5月，剪映Dreamina正式更名为即梦AI，小雷也在第一韶光进行了体验。
比较于成熟的AI作图，即梦AI当时的AI***水平是有些让人失落望的，文生***的自然措辞理解能力没有问题，但***质量确实有待提高，特殊是真实物理特性方面，即梦还须要连续努力。

而图生***由于给AI框定了方向，省去了想象组合步骤，***质量要比文生***好得多，但***主体大幅运动的情形下，还是会涌现闪现、扭曲的问题。

当然小雷体验的只不过是即梦AI的最初版本，经由一段韶光的发展，即梦AI已经达到能天生AIGC短剧的水平，进步之大让人惊喜。
小雷期待已久的故事创作模式相信不久就会正式对外开放，届时或许普通用户也能创作自己的AIGC连续剧。

4、Runway：Gen-3重磅更新，演示效果不输Sora

作为老牌AI***天生厂商，Runway的***天生模型Gen-1和Gen-2在初期收成了不少好评，随着竞争对手陆续推出搭载最新***天生模型产品，Runway由于模型掉队，在很长一段韶光内饱受争议。

今年6月，Runway连夜发布了基于最新***天生模型Gen-3天生的各种演示***，电影级的画面细节直接震荡了全体网友。
7月2日，Runway宣告Gen-3向所有用户开放利用，小雷原来也想考试测验一番，但每月12美元的会员费把我劝退了，因此我也只能从演示***画面来剖析一二。

官方展示***时长为10秒，人物天生中的人物面部细节和情绪营造方面比较细腻，场景、风景天生中的元素、光影没有太大的违和感。
比如这个***，女子乘坐车辆穿过明暗交替的街道，外部光源照射在面部的变革十分自然，车外穿梭的车辆也没有涌现断层等违和场景。

图源：Runway天生

官方公布***的效果称得上是惊艳。
虽然不知道正式利用的效果如何，但就目前来说，个人认为不输Sora。

5、Dream Machine：***质量颠簸大，利用本钱高

6 月 12 日，初创公司 Luma AI 发布了新的 AI ***天生模型 Dream Machine（造梦机器），并且面向公众开放测试。
很快，不仅官方放出的一系列样片，社交网络上还涌现了一大堆由网友通过“造梦机器”天生的***。

坦率地讲，“造梦机器”官方***给小雷的第一印象还是挺惊艳的，除了人物主体和背景的同等性，最让人惊异的可能是光照的变革，包括亮度的变革也符合基本的物理规律。

但在实际网友创作和分享的内容中，即便是在那些相称惊艳的少数作品中，你也能看到或多或少的缺点。
小雷也试着用“造梦机器”创作了一段***，实际效果还是比较糟糕的：人物诡异的倒退，在背后拿着伞的怪异举动，还有飞起来的雨伞。

图源：Luma AI天生

“造梦机器”每月为普通用户供应30次免费天生机会，除了免用度户，“造梦机器”还供应三档付费选项，包括29.99美元的标准档、99.99美元的专业档以及499.99美元的高等档，差异是每个月可以天生***的次数。

对付普通用户来说，这些定价比Runway的12美元还离谱，或许官方目标群体是那些通过“造梦机器”创作***在TikTok上赢利的创作者吧。

更长、更真实、更多元，AI***不断进化

首先，今年AI***最大的打破之一，便是天生***长度的延长。
要把稳的是，小雷指的是模型极限区域的时长，而不是消费端时长。
之前Runway和Pika都只能天生出3-4秒的***，对付行业和用户来说，实在是太短了，根本无法知足长素材的需求。

小雷梳理了已对外公布的大模型***天生时长，个中Sora为60秒，Vidu为32秒。
快手就厉害了，它供应的***续写功能支持连续多次续写***内容，在担保***同等性的条件下，最永生成3分钟***，在***时长这块，快手可以说是遥遥领先。

其次，是视比年夜模型产品输入办法的多元化。
用户不再局限于笔墨输入，而是可以选择图像、***作为输入，模型会根据用户的输入来天生***。
比如，用户可以上传一张静态图，而视比年夜模型则会根据图片制作***。

末了，是人们对AI***最大的期待：足够真实。
上文有提到，天生***的技能难度远比天生图片高。
此前，AI天生***有两个硬伤。
一是如何让天生***符合物理规律，常日涌如今人与人、或者人与物体之间进行繁芜交互时；二是韶光的连贯性，也便是让AI记住***中的人和物体，纵然被暂时挡住或移出画面，之后再涌现的时候也能按照物理逻辑地让***保持连贯性。

这两点在今年得到了很好的改进，比如这个快手可灵AI天生的***，当饺子进入小孩嘴里，部分饺子被完备遮挡，当再涌现饺子时，吃饺子留下的咬痕和被咬后的饺子形态也能保持自然地连续运动，保持了韶光和物体的连贯性。

图源：可灵AI天生

这意味着***天生模型已经初步具备了“理解”天下的能力，理解物体运动过程中的物理天下，也能预测***下一步可能发生什么。

下半年，AI***天生领域会有什么新惊喜？

以目前的发展趋势来看，今年下半年，还会有更多企业加入到AI***天生的技能竞赛中。
毕竟，过去的半年里，有不少成本热钱涌进了行业，新老玩家们都忙着猛推产品落地。

在2024天下人工智能大会（WAIC）上，新壹科技展示基于了新壹视比年夜模型的系列产品及运用处景办理方案，并正式发布了新壹视比年夜模型2.0版本。
目前，新壹科技已在文旅、金融保险、媒体、营销、出版、政务、教诲、汽车、医疗等浩瀚场景打造了落地方案，大幅提高了各垂直领域的创造力和生产力。

图源：新壹科技

这实在也是下半年的一大趋势，AI***天生赛道也将从卷模型，升级为卷落地。
下半年，我们有望看到更多基于***天生大模型的AIGC落地运用，这也就意味着我们会在更多场景看到AIGC内容。

正如前面所说的，AI***的利用场景如今在不断被拓展，在AIGC短剧之外增加了大量新场景。
而随着无线网络、AI大模型等技能的不断发展，AI***利用的场景和功能也会逐渐变革。
很可能，未来我们看到的广告、短***、影视等内容都将由AIGC天生，须要用到真人拍摄的机会将越来越少。

AI***还有更大的潜力，等待被挖掘。

2024上半年，科技圈风起云涌。

大模型加速落地，AI手机、AI PC、AI家电、AI搜索、AI电商……AI运用层出不穷；