AI视频生成工具变革

全新AI视频生成工具 Pika 爆火,美国AI创业公司Pika Labs发布了全新的文生视频产品Pika 1.0。

 AI生成视频工具Pika爆火

pika

2023年底,AI视频生成领域可谓是“热闹非凡”。11月16日,社交媒体巨头Meta发布工具Emu Video。几乎是同一时间,字节跳动的PixelDance模型也宣布问世。11月21日,Runway的Gen-2动态笔刷Motion Brush面世。11月24日,AIGC领域的佼佼者Stable AI推出了Stable Video Diffusion(稳定视频扩散模型)。5天后,Pika 1.0发布。

华人联创,OpenAI联创参投,创始人郭文景(Demi Guo)和联合创始人兼CTO Chenlin Meng都是斯坦福大学AI Lab博士生。此前文生视频领域比较受关注的公司有Runway、Stability AI。Runway和Pika 1.0对标的产品是Gen-2模型。Stability AI此前也推出了Stable Video Diffusion模型,目前该产品对生成视频长度有限制。

郭文景这样解释AI生成图片和AI生成视频技术的区别:“视频有很多和图片不一样的问题,比如要确保流畅性、确保动作;视频比图像更大,需要更大的GPU内存。视频生成需要考虑逻辑问题,还要考虑如何生成,是一帧一帧还是一起生成。现在很多模型一起生成,生成的视频就很短。但如果要一帧一帧生成,又要怎么做?很多是图片生成不会面临的新的技术问题。” 接下来,她想要突破的关键点依然是AI生成视频的时长以及清晰度、流畅性。

Pika Labs成立于今年4月,公司定位是AI视频生成工具,致力于让每个人都成为创意视频导演和制作人。3个月,公司就在Discord上发布了第一代产品,8个月之后,新的Pika 1.0面世。目前,Pika 1.0可以支持3D动画、动漫或电影等各种类型,且还可以支持各种画布延展、局部修改、视频时长拓展等编辑功能。

Pika 1.0 系初创公司 pika_labs 推出的产品,这是一款AI视频生成工具,能够生成和编辑3D动画、动漫、卡通和电影等各种风格的视频。用户可通过Pika对视频内容进行实时的精准编辑,比如根据已有素材扩展画面、以文字生成视频素材或控制镜头、以“图+提示词”直接生成动画等。

 

以下是AI视频排行榜归纳表格

工具名称 优点  备注 
 Gemini Omni Flash / Veo 3.1(Google DeepMind)  提供出色的影院级画面质感及行业领先的原生音视频同步生成能力。  官网
 Wan 3.0 / Wan 2.7(阿里巴巴)  凭借极高的时间一致性与综合视听效果,在多项盲测基准中位居前列。  官网
 MiniMax H3 / Hailuo 2.3(MiniMax)  在真实人物运动、动态细节及高性价比商用生成上表现优异。  官网
 Seedance 2.0(字节跳动)  运动质量、提示词遵循度极高,且 Fast 层级具备极强的质价比。  官网
 Kling 3.0 / Kling Video O3(快手)  :单次可生成 10 秒长片段,支持原生音频与多语言口型同步,综合实力强劲。  官网
 Runway  结合了两种不同模型的功能,具备文字生成和影片编辑能力  官网
Stable Video Diffusion  提供广泛的视频应用于媒体、娱乐、教育、营销等领域;功能强大  官网 
 Pika Labs  简洁易用的特点,容易上手;能够轻松打造专业级的视频内容  官网
 Morph Studio  提供快速、高品质的影片生成服务;可以根据简单的文字提示创建出令人惊艳的视频  官网
 Kaiber  专注于动画视频生成,风格多样、主题丰富  官网
 Wonder Studio  可将CG角色动画、灯光合成到真实场景中;提供全新的创作体验  官网
 VisionStory  专注于舞蹈视频生成,用户可根据音乐和视觉风格打造独一无二的作品  官网

 

按使用场景分类推荐

需求类型 推荐模型  核心优势 
 最佳画质与音效  Veo 3.1 / Kling Video O3  光影写实、声画同步完美
 最佳长视频连贯  Kling 3.0。  维持10秒长片段角色与场景稳定
 高性价比 / 预算首选  Seedance 2.0 Fast  运动自然,生成成本大幅降低
 快速灵感迭代  Wan 2.6 / Wan 3.0  速度极快,适合大批量原型测试
 动漫与风格化  PixVerse V4.5  夸张动作与艺术风格表现力强