火星网校
如视研究成果入选CVPR，室内多视角逆渲染技术全新突破
发布时间：2024-06-10 12:33:37 浏览量：153次
近日，计算机视觉三大顶级会议之一CVPR正式公布了2024年的接收结果，如视首席科学家潘慈辉带领团队提交的最新研究成果《TexIR: Multi-view Inverse Rendering for Large-scale Real-world Indoor Scenes（大规模室内真实场景的多视角逆渲染）》成功入围。该项研究在真实空间的更深层次数字化层面取得突破进展。此次全新逆渲染技术研究成果的入围，不仅意味着如视在三维实景模型重建和混合现实领域的研究已获得了国际学术界的高度认可，更标志着如视的算法能力已在理论研究、技术应用等层面步入国际领先水平。
对物理世界的三维重建，作为计算机图形学和计算机视觉领域的热点课题之一，已随着技术的不断成熟，被越来越广泛地应用于营销、空间数字化管理、泛娱乐、虚拟现实等领域。目前市面主流的算法，通过空间几何模型与纹理贴图的方式，在场景的外观还原度上与真实世界看起来几近相同。
目前的三维重建方式，仅能对场景的外观特征加以还原，但无法对场景内诸如光照、反射率、粗糙度等更深层次的属性加以数字化，导致无法对这些深层信息进行查询和编辑，更无法将其更有价值地转化为渲染引擎可使用的PBR渲染资产，生成极具真实感的渲染效果。
逆渲染原理
而如视团队本次开创性提出面向真实室内场景的多视角逆渲染框架，可基于精准的空间数据，反向推测获取对诸如光照、反射率、粗糙度等场景内在属性，在三维重建的基础上恢复出贴近真实场景的光照和材质表现，在重建效果、成本效率、应用范围等维度实现全面提升。
逆渲染技术实操与应用
如视首席科学家潘慈辉对此表示：“我们创造的全新深度逆渲染框架，真正意义上实现了对真实世界更深层的数字化，解决了以往逆渲染方法难以在真实场景下恢复物理合理的材质和光照以及多视角一致性的问题，为三维重建和混合现实的落地应用带来了更大想象空间。”
1
更贴近真实的场景还原效果
与过往采用合成数据训练的方法不同，如视提出的全新深度逆渲染框架，首次引入了“层级式场景先验”，通过多阶段的材质优化，结合如视数字空间中精准数据，对空间内光照、反射率、粗糙度等物理属性进行分层级的精准预测，并将预测结果无缝转化为物理合理、全局一致的多类型材质贴图等渲染资产，并可适配目前主流渲染引擎。
2
更低的计算成本
近年来，为了更好地解决逆渲染问题, 同时减少对训练数据的依赖, 可微渲染的方法被提出，即通过“微分求导”的方式，使正向渲染可微分，进而将梯度反向传播至渲染参数，最终优化得到基于物理的待求解参数。由于复杂室内场景存在大量的复杂光学效应，如遮挡、阴影，在可微渲染中建模全局光照会带来高昂的计算成本。如视本次提出的光照表示模型可以高效准确地表示室内场景内的全局光照，极大地提升了逆渲染方法的效率。据实验分析统计，基于如视的逆渲染框架，相较传统方式，计算速度大幅提升近24倍，数据内存容量也实现了成倍缩减。
3
更大的重建规模
基于如视的精准数字空间模型，与高效准确的混合光照表示，全新的逆渲染框架引入多种场景先验，解决了以往NeRF-like的神经逆渲染方法无法建模大尺度室内场景的问题。
未来，全新的逆渲染技术将有望开启更为广阔的MR应用，如室内材质编辑、新视图合成、光照调整、物体空间融入等。通过对真实世界实现更深层数字化，如视将进一步加速实现数字空间的建设，发挥算法及技术产品优势，推进研究成果产业化，为商业零售、工业设施、文博会展、公共事务、家居家装、房产交易等行业带来数字化应用升级的全新发展机遇。
关于CVPR：
CVPR（IEEE Conference on Computer Vision and Pattern Recognition，即IEEE国际计算机视觉与模式识别会议）作为计算机视觉领域最顶级的会议，每年都会吸引大量研究机构和高校参会。近年来，CVPR的投稿数量也在持续增加。据官方信息统计，本届CVPR有效投稿9155篇，比去年增加了12%，创下新纪录；收录2360篇，接收率为25.78%。
火星时代教育，专注数字艺术教育，开设游戏设计培训、动画培训等多项课程。有兴趣了解更多课程信息，可点击咨询。
热门课程推荐
热门资讯
-
1. 室内设计师必备灵感网站推荐，快来获取作品、模型、素材源吧！
小D整理了一些室内设计师常用的网站，包括作品、模型、搜索、软装等，快来获取灵感和素材吧！
-
Forma AI: 一款全流程建筑设计和施工工具，驱动规划方案设计。原为挪威产品SpaceMaker，被改进为涵盖室内和景观设计的工具。非常推荐给建筑和室内设计师使用，试试看Maket！
-
室内设计师必收藏的网站有哪些?
-
4. 什么是现代简约风?它有什么特点?在空间布局上应该怎么搭配?
现代简约风是一种注重功能性和实用性的室内设计风格,强调简洁明了的线条和基本形状,融合实用性和时尚感,营造出一个整洁、舒适的居住空间。它常常采用...
-
是比利时室内设计师、古董和艺术品经销商,也是AD100名人堂成员。Axel Vervoordt认为家是一个人与亲友共享私密时光的空间,应该能给人以疗愈和滋养。最...
-
在这里，小编为大家整理了一系列关于室内设计、软装设计的网站推荐。从设计师作品库到国内一线设计公司官网，从效果图相关网站到资源下载站，再到国外优秀网站和台湾设计网站，以及值得推荐的设计APP，绝对让你眼花缭乱，收获满满灵感。
-
想要快速上手装修软件，但CAD、3D max太专业？不用担心！这里推荐6款操作简单的装修软件，让小白也能快速设计家居。
-
以下是12款必备的环境艺术设计软件，助你完成各种设计任务。 1. AutoCAD：用于建筑室内设计等领域的二维和三维模型创建。 2. SketchUp：直观易用的三维建模软件，帮助设计出精美的室内外环境。 3. Revit：专业级建筑信息模型软件，可协助设计全方位的环境布局。 4. Rhino：强大的几何造型工具，用于设计复杂的建筑结构和景观元素。 5. Lumion：实时渲染引擎，可将设计作品以生动的方式展示给客户。 6. Photoshop：广泛应用的图像处理软件，能够增强和编辑设计方案。 7. 3ds Max：出色的三维建模和渲染软件，可创造逼真的环境效果。 8. Sketch: 优秀的矢量绘图工具，支持设计师实时协作和共享创意。 9. Illustrator：专业级矢量图形软件，用于创作精美的插图和图标。 10. InDesign：行业标准的页面设计和排版软件，适用于创作室内设计方案。 11. ArchiCAD：面向建筑师的BIM软件，可实现设计数据的协作和管理。 12. V-Ray：强大的渲染引擎插件，可为设计师呈现出逼真的光影效果。
-
中国十大软装设计公司排名 软装设计公司哪家好
-
通过介绍深化设计的背景、深化设计的工作流程、图纸深化的内容和作用。深化设计是未来施工中的重要一个环节,也是工程质量能否保证的一个重要因素,希...
最新文章
