会员登录 - 用户注册 - 设为首页 - 加入收藏 - 网站地图 IllumiNeRF:无逆渲染的 3D 重新照明 随意切换任何光效!

IllumiNeRF:无逆渲染的 3D 重新照明 随意切换任何光效

时间:2024-07-02 03:25:01 来源:带水拖泥网 作者:自媒体 阅读:644次

IllumiNeRF:无逆渲染的 3D 重新照明 随意切换任何光效

CSS站长资源(ChinaZ.com) 6月11日 消息:近日,无逆来自谷歌研究团队以及伊利诺伊大学厄巴纳 - 香槟分校的渲染学者们发表了题为《无逆渲染的3D 重新照明》的研究成果。该研究针对使用未知光照条件下的重新照明一组物体图像,以恢复能够在目标光照下从新视点呈现的随意3D 表征的可重新光照视图合成方法进行了探讨。

传统方法基于反渲染,切换试图将解释输入图像的任何物体几何、材料和光照进行分离。光效然而,无逆这通常涉及通过可微分蒙特卡洛渲染进行优化,渲染具有脆弱性且计算成本高昂。重新照明

因此,随意研究团队提出了一种更简单的切换方法IllumiNeRF:首先利用受光条件的图像扩散模型重光每个输入图像,然后利用这些重光图像重建神经辐射场(NeRF),任何从而在目标光照下呈现新的光效视角。他们证明了这种策略出人意料地具有竞争力,无逆并在多个重光基准测试中取得了最新成果。

它具体工作原理如下:

给定 (a) 中的一组图像和相机姿势,研究人员运行 NeRF 来提取3D 几何体,如 (b) 所示;

基于此几何形状和(c)中所示的目标光,为每个给定的输入视图创建辐射提示,如(d)所示;

接下来,使用 (e) 中所示的重新照明扩散模型和 (f) 中显示的每个给定图像的样本 S 可能的解决方案独立地重新点亮每个输入图像;

最后,通过潜在NeRF优化将重新编辑的图像集提炼成3D表示,如(g)和(h)所示。

3D 一致重新照明

第一行显示了最终潜在 NeRF 的渲染图;

第二行显示了与顶部每个渲染帧相对应的最近训练视图的扩散样本。

这种产品可应用于计算机图形学、增强现实和虚拟现实领域。例如,在电影制作中,可以利用该产品在不同光照条件下呈现3D 场景,从而节省拍摄成本和时间。在虚拟现实应用中,用户可以在不同光照环境下体验虚拟场景,增强了真实感和沉浸感。此外,该产品还可用于数字艺术创作和建筑设计等领域,为用户提供更灵活的光照表现和渲染效果。

产品入口:https://top.aibase.com/tool/illuminerf

(责任编辑:短视频)

相关内容
  • 《湄公河行动》男演员确诊恶性 医生提醒:小病也应重视
  • 还得是开源!潞晨Open-Sora技术路线公开,一键生成16秒720p视频,质量更高训练成本更低
  • 618 6000元以上手机销量公布:华为居然独占六款
  • iPhone 16 Pro Max尺寸曝光!边框更窄 外观变化巨大
  • Galaxy S24系列AI编辑功能引发争议 三星回应:正与监管机构合作
  • 一个人想做个人自媒体赚钱?你必须知道的8个真相!
  • 买它还是小米SU7!特斯拉Model 3高性能开启交付:售价33.59万元
  • 每3个商家就有1个在用,网商银行升级多平台管钱工具“电商通”
推荐内容
  • MobileDiffusion官网体验入口 轻量级文本到图像生成模型免费使用地址
  • 京东:618超5亿用户下单 数字人直播累计时长超40万小时
  • 不买车也逛下 小米汽车APP吸引超370万男性 杀入月活前5
  • iPhone 16或将9月10日亮相 部分配置已经曝光
  • 匿名论文提出奇招,增强大模型长文本能力居然还能这么做
  • AI教父Hinton:我支持AI取代人类!