使用深度学习让照片和绘画变成动画 - 转载自火星时代教育

发布时间:2024-06-26 10:58:03 浏览量:156次

华盛顿大学和Facebook的研究人员最近发表了一篇论文,展示了一种基于深度学习的系统,可以将静止图像和绘画转换为动画。称为照片唤醒的算法使用卷积神经网络从单个静止图像以 3D 形式对人或角色进行动画处理。

推荐:使用NSDT 编辑器助你快速搭建可二次编辑器的 3D 应用场景

图片来源:华盛顿大学和Facebook研究论文

华盛顿大学和Facebook的研究人员最近发表了一篇论文,展示了一种基于深度学习的系统,可以将静止图像和绘画转换为动画。称为照片唤醒的算法使用卷积神经网络从单个静止图像以 3D 形式对人或角色进行动画处理。

我们的方法适用于各种各样的全身,相当正面的照片,从体育照片到艺术和海报,”研究人员在他们的论文中说。此外,用户还可以编辑图像中的人体,在 3D 中查看重建,并在 AR 中探索它。

为了展示算法的力量,该团队使用了涂鸦,卡通人物,NBA球星和毕加索绘画的图像。

图片来源:华盛顿大学和Facebook研究论文

方法概述。给定一张照片,使用现成的算法执行人员检测、2D 姿势估计和人员分割。然后,将 SMPL 模板模型拟合到 2D 姿势中,并作为法线贴图和蒙皮贴图投影到图像中。我们系统的核心是:找到人的轮廓和 SMPL 轮廓之间的映射,将 SMPL 法线/蒙皮贴图扭曲到输出,并通过集成扭曲的法线贴图来构建深度图。重复此过程以模拟模型的后视图,并结合深度和蒙皮贴图以创建完整的绑定 3D 网格。网格被进一步纹理化,并使用彩绘背景上的动作捕捉序列进行动画处理。

原文链接:使用 AI 将绘画和照片转换为动画 (mvrlink.com)

想学习更多关于数字艺术的知识吗?快来点击咨询,了解火星时代教育的游戏设计培训、动画培训、原画培训等课程,开启你的数字艺术之旅!

热门课程推荐

热门资讯

请绑定手机号

x

同学您好!

您已成功报名0元试学活动,老师会在第一时间与您取得联系,请保持电话畅通!
确定