您现在的位置是:深度 >>正文
IllumiNeRF:无逆渲染的 3D 重新照明 随意切换任何光效
深度79795人已围观
简介CSS站长资源(ChinaZ.com) 6月11日 消息:近日,来自谷歌研究团队以及伊利诺伊大学厄巴纳 - 香槟分校的学者们发表了题为《无逆渲染的3D 重新照明》的研究成果。该研究针对使用未知光照条件 ...
CSS站长资源(ChinaZ.com) 6月11日 消息:近日,无逆来自谷歌研究团队以及伊利诺伊大学厄巴纳 - 香槟分校的渲染学者们发表了题为《无逆渲染的3D 重新照明》的研究成果。该研究针对使用未知光照条件下的重新照明一组物体图像,以恢复能够在目标光照下从新视点呈现的随意3D 表征的可重新光照视图合成方法进行了探讨。
传统方法基于反渲染,切换试图将解释输入图像的任何物体几何、材料和光照进行分离。光效然而,无逆这通常涉及通过可微分蒙特卡洛渲染进行优化,渲染具有脆弱性且计算成本高昂。重新照明
因此,随意研究团队提出了一种更简单的切换方法IllumiNeRF:首先利用受光条件的图像扩散模型重光每个输入图像,然后利用这些重光图像重建神经辐射场(NeRF),任何从而在目标光照下呈现新的光效视角。他们证明了这种策略出人意料地具有竞争力,无逆并在多个重光基准测试中取得了最新成果。
它具体工作原理如下:
给定 (a) 中的一组图像和相机姿势,研究人员运行 NeRF 来提取3D 几何体,如 (b) 所示;
基于此几何形状和(c)中所示的目标光,为每个给定的输入视图创建辐射提示,如(d)所示;
接下来,使用 (e) 中所示的重新照明扩散模型和 (f) 中显示的每个给定图像的样本 S 可能的解决方案独立地重新点亮每个输入图像;
最后,通过潜在NeRF优化将重新编辑的图像集提炼成3D表示,如(g)和(h)所示。
3D 一致重新照明
第一行显示了最终潜在 NeRF 的渲染图;
第二行显示了与顶部每个渲染帧相对应的最近训练视图的扩散样本。
这种产品可应用于计算机图形学、增强现实和虚拟现实领域。例如,在电影制作中,可以利用该产品在不同光照条件下呈现3D 场景,从而节省拍摄成本和时间。在虚拟现实应用中,用户可以在不同光照环境下体验虚拟场景,增强了真实感和沉浸感。此外,该产品还可用于数字艺术创作和建筑设计等领域,为用户提供更灵活的光照表现和渲染效果。
产品入口:https://top.aibase.com/tool/illuminerf
Tags:
相关文章
胖东来在门口给顾客身上扫雪:工作人员全程面带微笑
深度2月2日消息,据国内多家媒体报道,在河南许昌,胖东来安排工作人员在门口贴心给顾客扫雪,工作人员全程面带微笑,给顾客最舒适的购物体验。有网友表示,我就问,胖东来什么时候开到我家门口。最近一段时间,胖东来 ...
【深度】
阅读更多3月车圈百态,社媒声量成为了“战场”中心
深度今年3月,汽车圈格外热闹。从新车上市来看,理想、小米、小鹏、奔驰、比亚迪、长安等多个汽车品牌都推出了新款产品,总计数量达到52款,是第一季度上新数量最多的月份。其中小米SU7、理想MEGA一经上市便成 ...
【深度】
阅读更多AI日报:suno劲敌Udio上线就被挤崩;谷歌将推AI视频Google Vids;蚂蚁CodeFuse推图生代码;ChatGPT之后增长最快的AI网站竟是它
深度欢迎来到【AI日报】栏目!这里是你每天探索人工智能世界的指南,每天我们为你呈现AI领域的热点内容,聚焦开发者,助你洞悉技术趋势、了解创新AI产品应用。新鲜AI产品点击了解:https://top.ai ...
【深度】
阅读更多