发布时间:2024-06-18 16:54:14 浏览量:172次
最近人工智能在一个令人惊讶的领域产生了令人印象深刻的结果:图像和视频生成的世界。最新的例子来自芯片厂商Nvidia,该公司发布的研究展示了AI生成的视觉效果如何与传统的视频游戏引擎相结合。这一成果为未来的视频游戏、电影和虚拟现实带来了无限可能。
这项工作的亮点之一是第一个使用AI生成图形的视频游戏demo。这是一个简单的驾驶模拟demo,让玩家在AI生成的虚拟城市街区中驾驶,虽然无法离开车辆或与环境进行互动。令人惊叹的是,这个demo仅需一个GPU即可运行,这标志着这项前沿技术的重大突破。尽管GPU来自公司价值3000美元的顶级产品Titan V,通常用于高级模拟处理而非游戏领域。
Nvidia的系统通过几个步骤生成图形。首先,研究人员需要收集训练数据,这些数据源自用于自动驾驶研究的开源数据集。然后对镜头进行分段,将每一帧分成不同的类别:天空、汽车、树木、道路、建筑物等。接着,对这些分段数据进行训练,生成对抗网络,用于生成这些物体的新图像。
随后,工程师利用传统的游戏引擎构建了虚拟环境的基础拓扑。在这种情况下,他们使用了流行的虚幻引擎4作为框架,该引擎被广泛应用于诸如Fortnite、PUBG、Gears of War 4等多款游戏中。利用这个环境作为基础,深度学习算法实时生成各类物体的图像,并将它们嵌入到游戏引擎模型中。
要构建这个系统,Nvidia的工程师们需要克服许多挑战,其中最大的挑战是物体的持久性。由于深度学习算法每秒只能生成25帧图像,如何确保物体看起来一致?解决方案是为系统提供短期记忆,使其能够比较每一帧与之前帧的差异,并尝试预测运动物体的位置,从而创建与屏幕内容一致的新帧。由于计算量巨大,该游戏仅以每秒25帧的速度运行。
Nvidia的这项技术仍处于早期阶段,人工智能生成图形可能需要数十年才能普及到消费级产品。与光线追踪技术的发展相比较,光线追踪是目前图形渲染的热门技术之一,通过实时生成独立光线来在虚拟环境中产生逼真的反射、阴影和不透明效果。尽管交互式光线追踪早在很久之前就有了,但直到最近几周才开始运用于游戏中。
想要了解更多关于数字艺术教育的信息,欢迎点击点击咨询。数字艺术教育30年来致力于培养游戏设计、动画制作、室内设计等领域的专业人才,让你拥有成为行业精英的机会。
热门资讯
想将照片变成漫画效果?这篇文章分享了4个方法,包括Photoshop、聪明灵犀、VanceAI Toongineer、醒图,简单操作就能实现,快来尝试一下吧!
2. 华为手机神奇“AI修图”功能,一键消除衣服!原图变身大V领深V!
最近华为手机Pura70推出的“AI修图”功能引发热议,通过简单操作可以让照片中的人物换装。想了解更多这款神奇功能的使用方法吗?点击查看!
近年来,人工智能逐渐走入公众视野,其中的AI图像生成技术尤为引人注目。只需在特定软件中输入关键词描述语以及上传参考图就能智能高效生成符合要求的...
4. AI视频制作神器Viggle:让静态人物动起来,创意无限!
Viggle AI是一款免费制作视频的AI工具,能让静态人物图片动起来,快来了解Viggle AI的功能和优势吧!
5. Logo Diffusion——基于sd绘画模型的AI LOGO 生成器
这下LOGO设计彻底不用求人了。接下来详细演示一遍操作流程首先进入Logo D... 想学习更多AI技能,比如说关于怎么样利用AI来提高生产效率、还能做什么AI...
6. 零基础10分钟生成漫画,教大家如何用AI生成自己的漫画
接下来,我将亲自引导你,使用AI工具,创作一本既有趣又能带来盈利的漫画。我们将一起探索如何利用这个工具,发挥你的创意,制作出令人惊叹的漫画作品。让...
7. AI显卡绘画排行榜:4090无悬念,最具性价比出人意料
在AI绘图领域,Stable Diffusion的显卡绘图性能备受关注。本文整理了Stable Diffusion显卡的硬件要求和性能表现,以及2023年3月显卡AI绘图效率排行榜和性价比排行榜。欢迎查看最新的AI显卡算力排行榜。
以下是一些免费的AI视频制作网站或工具,帮助您制作各种类型的视频。 1. Lumen5:Lumen5是一个基于AI的视频制作工具,可将文本转换为视频。 用户可以使...
就能快速生成一幅极具艺术效果的作品,让现实中不懂绘画的人也能参与其中创作!真的超赞哒~趣趣分享几款超厉害的AI绘画软件,提供详细操作!有需要的快来...
10. 10个建筑AI工具,从设计到施工全覆盖!肯定有你从来没听过的
讲述了建筑业比较著名的AI公司小库科技做出的探索,在这儿就不多说了。今天,我们试着在规划设计、建筑方案设计、住宅设计、管道设计、出渲染图、3D扫...
同学您好!