火星网校
设计师玩转印象派插画转视频，探秘AI视频生成乐趣
发布时间：2024-08-12 19:25:49 浏览量：181次
刚玩过Pika 2.0这款“最优秀的免费AI视频生成工具”后，网友又有新乐子了。
昨晚，我在微博上看到了设计师@Simon_阿文 po出了一组AI生成的图片。本来他想为难一下这个名叫“Dream Machine”的大模型，但……小丑张嘴说话，旋转木马开始旋转，独角兽开始奔跑，po主直呼“我疯了”。
▲“马戏团”静帧生成视频（来源：Simon_阿文）
我也惊了，这绝对是迄今为止第一个能把风格化图片转成合理视频的模型。（风格化是一种模拟真实艺术手法的创作方式，会有绘画或印象派的效果，而不注重写实。）
Dream Machine（造梦机）是最新的Luma AI视频生成大模型，这家公司在融资中都得到了大量资金的支持。Luma AI模型可以快速生成新颖的影像内容。
从官网效果视频来看，“人紧闭双眼在水下呼吸”、“北极熊在雪野中慵懒地匍匐前行”、“房间瞬时发生了爆破”……生成视频动感、逼真、流畅，甚至有一些故事的延伸感！
▲Luma.AI官方视频效果
全球互联网的热情一下子被点燃，大量用户涌入Luma AI网站，乃至今天上午我试用时也出现了排队的情况。我承认，Luma AI生成模型终于能用了，虽然视频帧率远不如Sora，细节上还是问题很多，但比Pika半年推出的模型进步了一大截。
/ 01 / 实测：风格化表现力好，但画面质量太有问题
Luma AI的造梦机大模型用起来非常的简单，只要登入官网（
点击咨询）后注册，通过输入文字提示词，等待约2两分钟，就可以获得一段5秒的视频。
我先后将一些风景照片、影视截图、Coser高清美照等等投给Luma AI，120s的时间说长不长，如果你能忍受偶尔几次的卡顿，模型能消化各种风格，交出一些生动有趣的“电影级”画面。
首先，这个模型对提示词的要求低，哪怕你说“将图片转化成视频”，Luma AI也可以自由发挥。比如我将电影《教父》的画面给到模型，你能想象AI会怎么“续写”吗？视频中，老教父站起身来，他旁边的侍从一脸凝重地拉住了他，这画面引人遐想，仿佛暴风雨前的蓄势待发。
▲电影《教父》画面生成视频
一直以来，过去人们对图生视频模型的印象大概是超写实还行，但风格化表现极差，这一次Luma AI却表现真的不一样。
相对来说，文生视频的效果就会差一些。我直接使用Luma AI给出的参考文本生成视频，可以看到视频中的熊突然跳跃到空地上，然后对一个不断变形的吉他使出了“无影爪”……运动幅度不是很流畅。
▲文本“一只戴着墨镜的泰迪熊在一片美丽的大瀑布前的丛林里，弹着电吉他、跳着舞、晃着头。”生成视频
我承认，Luma AI在做画面补充上是有一手，但是也会翻车在这一点上，出现完全不符合内容逻辑的情况。比如，我将《楚门的世界》结局时的经典微笑画面交给大模型，视频闪现了两张一群人簇拥“楚门”的画面，离谱！第二个画面不知道是AI从哪里学来的，有种可恶的熟悉感。
▲电影《楚门的世界》画面生成视频，提示词为“这个男人开心地笑了起来并挥手再见的镜头”
另外，理解物理世界对于Luma AI来说仍然是未被解决的问题。当某网友将美剧《生活大爆炸》中Sheldon的剧照投给Dream Machine，生成视频中Sheldon的动作细节不符合物理。这个是AI视频生成的老毛病了。
点击咨询
热门课程推荐
热门资讯
-
想将照片变成漫画效果？这篇文章分享了4个方法，包括Photoshop、聪明灵犀、VanceAI Toongineer、醒图，简单操作就能实现，快来尝试一下吧！
-
2. 华为手机神奇“AI修图”功能，一键消除衣服！原图变身大V领深V！
最近华为手机Pura70推出的“AI修图”功能引发热议，通过简单操作可以让照片中的人物换装。想了解更多这款神奇功能的使用方法吗？点击查看！
-
近年来,人工智能逐渐走入公众视野,其中的AI图像生成技术尤为引人注目。只需在特定软件中输入关键词描述语以及上传参考图就能智能高效生成符合要求的...
-
4. AI视频制作神器Viggle：让静态人物动起来，创意无限！
Viggle AI是一款免费制作视频的AI工具，能让静态人物图片动起来，快来了解Viggle AI的功能和优势吧！
-
5. Logo Diffusion——基于sd绘画模型的AI LOGO 生成器
这下LOGO设计彻底不用求人了。接下来详细演示一遍操作流程首先进入Logo D... 想学习更多AI技能,比如说关于怎么样利用AI来提高生产效率、还能做什么AI...
-
6. 零基础10分钟生成漫画，教大家如何用AI生成自己的漫画
接下来,我将亲自引导你,使用AI工具,创作一本既有趣又能带来盈利的漫画。我们将一起探索如何利用这个工具,发挥你的创意,制作出令人惊叹的漫画作品。让...
-
以下是一些免费的AI视频制作网站或工具,帮助您制作各种类型的视频。 1. Lumen5:Lumen5是一个基于AI的视频制作工具,可将文本转换为视频。 用户可以使...
-
8. AI显卡绘画排行榜:4090无悬念，最具性价比出人意料
在AI绘图领域，Stable Diffusion的显卡绘图性能备受关注。本文整理了Stable Diffusion显卡的硬件要求和性能表现，以及2023年3月显卡AI绘图效率排行榜和性价比排行榜。欢迎查看最新的AI显卡算力排行榜。
-
9. 一款免费无限制的AI视频生成工具火了!国内无障碍访问!附教程
人人都可以动手制作AI视频! 打开网址https://pixverse.ai/,用邮箱注册后,点击右上角Create,就可以开始创作了。 PixVerse目前有文案生成视频,和图片生...
-
就能快速生成一幅极具艺术效果的作品,让现实中不懂绘画的人也能参与其中创作!真的超赞哒~趣趣分享几款超厉害的AI绘画软件,提供详细操作!有需要的快来...
