范文健康探索娱乐情感热点
投稿投诉
热点动态
科技财经
情感日志
励志美文
娱乐时尚
游戏搞笑
探索旅游
历史星座
健康养生
美丽育儿
范文作文
教案论文

Meta研究根据HDR图像重建真实世界反射属性和阴影的方法

  查看引用/信息源请点击:映维网
  根据HDR图像重建真实世界反射属性和阴影
  ( 映维网 2021年11月02日 )忠实地恢复世界的副本对于虚拟现实、增强现实和混合现实而言至关重要。虚拟现实设备将用户沉浸在虚拟世界中,它们依赖于场景在曲面几何、材质属性和照明方面的表示。由于手动制作这样的虚拟世界模型非常冗长,所以对能够自动重建真实世界环境的方法的需求越来越大。
  然而,它们的实用价值在很大程度上取决于虚拟世界的真实感。 MR  和AR  则依靠真实场景表示来渲染虚拟对象,它们相对于其周围环境需要具有正确的物理交互和视觉外观。尽管曲面几何的重建已经相当成熟,但场景反射和照明的估计依然是一个困难的挑战,特别是如果我们想直接从输入视频中估计所述特性。这项研究能够将虚拟世界和现实世界更紧密地结合在一起,从而允许用户沉浸在真实的数字环境之中。
  在名为《Recovering Real-World Reflectance Properties and Shading From HDR Imagery》的论文中,Facebook和慕尼黑工业大学介绍了一种根据HDR图像重建真实世界反射属性和阴影的方法。
  在恢复复杂反射和阴影的方法中,给定场景几何体的基于网格的 3D  重建、覆盖所述几何体及其相应姿态的HDR RGB帧序列,团队首先重建并估计照亮的漫反射HDR纹理。然后,仅利用纹理几何建立反照率和阴影估计的基础,并且给定对象分割,估计每个对象的镜面材质参数。请注意,与其他方法相比,团队的输入假设仅在HDR数据方面有所不同,这允许系统覆盖场景从最暗到最亮的动态范围。Microfacet BRDF模型:团队只关注各向同性、介电(非金属)和不透明(非半透明/透明)的对象。BRDF的一个理想特性是将其加性分离为漫反射和非漫反射component,因为它允许将BRDF参数估计问题分为两个单独的、更容易解决的问题。 照明漫反射HDR纹理估计:团队通过将视频帧投影到曲面几何来估计照明漫反射HDR纹理。 反照率和阴影估计:团队现在能够有效利用HDR纹理的强度与真实亮度成比例的信息。 镜面反射外观估计:给定每个表面点处照亮漫反射场景Ld(x)的估计,团队可以估计每个对象的非漫反射BRDF参数ψ和ψ
  在实验中,给定每个表面点的反照率和阴影,以及每个对象的镜面反射外观,团队现在可以定量和定性地评估所提出方法的有效性。研究人员使用Replica数据集进行评估,因为它提供了适当的输入数据:完整场景的重建网格、HDR视频、每帧camera姿态和语义对象实例信息。对于反照率和阴影估计的定量验证,团队使用自己捕获的数据集来控制场景中的照明和对象。房间总共有四个globe light和三个LED面板作为光源,它们的波长和发射不同。两次扫描在各自的照明方面有所不同:对于第一次扫描,所有四个globe light和一个LED面板都打开(扫描/重建A)。对于第二次扫描,仅打开了两个LED面板(扫描/重建B)。请注意,研究人员为每个数据集预先计算照明漫反射HDR纹理集。
  对于反照率和阴影验证,团队使用重建A和B以及Replica数据集的场景来评估前面描述的反照率和阴影。通过NVidia的OptiX引擎,研究人员从每个对应的表面元素每图素投射10000条光线,以获得阴影和反照率的去噪估计值。这一过程需要时间∼10分钟。
  对于镜面反射外观估计验证,为了进行定量和定性比较,团队在Replica数据集部署了前面所述的方法;使用OptiX为每个像素对应的表面元素投射200条光线。
  最后,有了完整的BRDF(反照率、镜面反射和粗糙度),团队可以在新的合成照明和其他虚拟对象情景下对整个场景进行完整的视觉精确渲染。所以,研究人员部署了一个具有四次反弹的路径跟踪引擎。添加到办公室场景重建中的兔子和雕像看起来忠实而逼真,因为它们考虑了整个场景的外观,从而产生了一致的阴影和材质效果。
  当然,团队指出了所述研究的限制。因为假设给定几何体,所以劣化可能会对结果产生负面影响,这是已知几何体反向渲染的标准限制。在测试中,团队没有遇到导致系统失败的互反射,因为选择目标帧是为了最大化基于直接照明的镜面反射。但由于单反弹假设,团队预计强互反射的存在会限制框架的性能。在未来,研究人员的目标是克服照明漫反射HDR纹理的特定限制,因为它可能会受到与视图相关的烘焙效果的影响。
  相关论文 :Recovering Real-World Reflectance Properties and Shading From HDR Imagery
  总的来说,研究人员介绍了一种从HDR图像估计完整 3D  场景的BRDF和阴影特性的方法。团队能够仅使用重建的几何体和HDR纹理来恢复每个表面元素的反照率和阴影。团队同时提供了一种自动计算每个对象的目标帧的方案;然后使用所述参数来估计每个对象的非漫反射材质参数。在一系列具有挑战性的真实世界HDR数据集上所进行的大量实验表明,所述方法能够创建几乎与真实世界无法区分的重建效果:一种利用HDR纹理估算每个表面元素的反照率和明暗度的有效方法。 在估计过程中为场景中的每个对象计算理想目标帧的过程 一种使用嵌套最小二乘优化网格搜索估计非扩散BRDF的方法。
  ---
  原文链接:https://news.nweon.com/91150

为什么苹果手机降价了,国产手机越来越贵!内行人告诉你原因其实在iPhone13发布之前不少朋友都猜测今年它的售价会在6200以上,而且网上各种消息曝出,结果发布之后令人大跌眼镜,iPhone13只要5999,并且在双11期间,也是史无前12月电脑DIY配置单主观推荐,不是刚需建议明年再说!618见?本文推荐配置和价格仅供参考,可自行选择升级,可更换你喜欢的配件。本文有二手显卡的配置请注意!没有保修存在一定风险,如果预算充足建议各位购买全新显卡。目前显卡价格还是偏高,除刚需等不主机游戏深度爱好者,需不需要购买4k120hz的游戏电视?与普通电视相比有什么区别?4K必要,120刷不强求。买个接口齐全的显示器不香么?非跟电视较劲。应该买8k的,ps5的是8k,男人就应该对自己好点!如果是深度爱好者应该是满配吧!现在4K电视是主流产品了,但1Google预计明年推出Android12GoEdition,APP启动速度大幅提升如同过去在各版本推出GoEdition设计,Google近期也宣布推出Android12GoEdition,标榜比起Android11GoEdition在app启用速度能提高30,骁龙8Gen1真首发,摩托罗拉edgeX30首销破亿,雷军满眼都是羡慕小米和联想的高管,都在社交媒体表示,自己才是真首发。现在,摩托罗拉edgeX30迎来首销,高通骁龙8Gen1终于来了。首销反响很不错,25分钟销售额轻松破亿。联想拿到首发,摩托罗拉华为手机如何清理释放内存垃圾?华为手机如何清理释放内存垃圾?这时一个大家老生常谈的话题,说简单也简单,说复杂谈不上,下面本人华为手机来说说。华为手机虽然很多更换为鸿蒙系统了,但它与安卓系统几乎差不多,只是鸿蒙的如果当初倪光南留下,柳传志被踢出去。现在联想会怎样?现在联想就会是一个真正的高科技公司。一个芯片公司。每年可为企业节约数千亿的芯片款,也不用被美国卡脖子和干瞪眼。这也得感谢柳传志同志的盖世之功,将我们最早的芯片规划家倪光南一脚踢翻,2021年发生的最玄幻的事是什么?2021年12月15日晚上中国政法大学几位法学教授就中演协不正当惩治艺人问题从法律层面开展讨论。B站直播5分钟,只介绍了各位教授及李老的名字,被B站管理员关闭直播间,原因是涉及违法如果国企都采购华为电脑,联想还能继续占据龙头地位吗?华为技术占领市场,联想靠拉关系,占领市场,贸易,战开打,高下立判,立马现形支持华为如果国有企业采购华为电脑,首先哭的是美国IBM公司。因为联想集团的总部在美国,美国的IBM公司的股推荐一些超好用的学英语软件?百词斩1支持离线使用,0流量背单词。2一个单词一张图,利用图形建立单词与真实环境的联系3直接添加好友,既能互相看见学习动态,还能一起冲刺每周排行榜。4提供单词TV和单词电台,英语老怎么快速把音频转成文字?你好,我觉得快影这个软件识别字幕挺好用的抖音上面导入视频时候有个自动自幕,可以识别哟!可以使用讯飞,的确好用快速把音频文件转成文件,一般来说就是使用软件,原始一点的方法就是边听录音
2021年度工业互联网影响力10大企业领袖每个行业都有自己的强大推手,他们凭借着一腔热血,创办或担任企业要职,要么力挽狂澜于既倒,将企业起死回生,要么披荆斩棘无畏惧,开辟了人人都争相追随的新道路。在即将过去的2021年,对SPAD芯片厂商阜时科技,预计2022年上半年完成PreIPO阜时科技成立于2017年11月,总部位于深圳,专注于激光雷达SPAD芯片设计,是集成电路设计企业国家高新技术企业广东省人机交互传感器工程技术研究中心。其产品主要有SPAD芯片光学传36氪首发瀚博半导体获16亿B1B2轮融资,主攻高端算力芯片近日,36氪获悉,芯片设计独角兽企业瀚博半导体获16亿人民币的B1和B2轮融资,由阿里巴巴集团人保资本经纬创投和五源资本联合领投,国寿科创基金MiraeAsset(未来资产)基石资真的有不留死角的洗地机?添可芙万二代深度体验来了对于地面清洁的要求,我还是比较高的,一直在追求用最少的精力保持家里的清洁。所以我经常在不断地尝试各种地面清洁设备吸尘器扫地机洗地机我都用过。所以,要聊起这个话题,自我感觉还是有一点促进科技创新是互联网巨头应尽的责任互联网累积的数据和算法,除了流量变现,还有另一种打开方式,即促进科技创新,人们期待巨头们不仅能在商业模式上进行创新,更能承担起推进科技创新的责任。步入互联网下半场,中国互联网企业在OPPOK11s升级6000mAh大电池,骁龙870坐镇,12512G卖2399据业内人士透露,2022年智能手机行业将会迎来巨变,主流手机的拍照技术会得到革命性突破,同时定位在中低端市场的机型在续航存储以及处理器上也会得到极大突破。目前,OPPO旗下定位于中iPhone13持续热销,但我入手了iPhone11,究竟为啥?最近,大家iPhone13系列全面降价,相较于上市初期还要加价买,现在的价格是真的香。不过这个时候我却入手了一台iPhone11,那么到底是为什么呢?1。价格便宜。iPhone13知网降价能否推动机制完善日前,知网下调硕士博士学位论文下载价格,与之前价格相比分别下降50和62。如果说中南财经政法大学退休教授状告知网维权胜诉获赔70万元是个案的胜利,那么现在平台论文下载价格下调应该算MateX2素皮版公布19699元搭载5G版麒麟9000在今天下午的华为P50Pocket新品发布会上,除了折叠屏新机P50Pocket之外,华为也终于公布了早在今年2月份就发布的另外一款折叠屏旗舰MateX2素皮版的开售时间。华为称M首发评测AMDRadeonRX6600XT成为1080P游戏新悍将在今年三月发布了面向中高端的2K游戏卡RadeonRX6700XT后,时隔近半年,AMD终于推出了RDNA2架构的中端显卡RadeonRX6600XT,瞄准了1080P高帧率游戏市不只是酒桌陋习,而是刑事案件,拒绝阿里裹挟舆论阿里性侵案今日闹的沸沸扬扬,热搜反反复复上了又撤,阿里员工都在传播一份洗白文案,官方表示案件正在侦查中。首先说明一下,刑法是如何定义强奸罪的。强奸罪是指违背妇女意志,采用暴力威胁或