野外材质外观编辑:基于感知属性的方法
摘要:通过单个图像直观地编辑材料外观是一项具有挑战性的任务,考虑到光与物质之间的相互作用的复杂性,以及人类感知的模糊性。传统上,这个问题是通过估计场景的其他因素(如几何形状或照明)来解决的,从而解决了反向渲染问题,并将最终结果的质量降低到这些估计的质量。我们提出了一个单图像外观编辑框架,使我们能够通过增加或减少描述这种外观的高级感知属性(例如光泽或金属感)直观地修改物体的材料外观。我们的框架接受一个未受控制的照片中的单个对象的输入,在这种情况下,几何,材料和照明是不受控制的,并且不需要进行反向渲染。我们依赖于生成模型,并设计了一种具有选择性传输单元(STU)的新型架构,可以保留输入图像中的高频细节。为了训练我们的框架,我们利用了一个使用基于物理的算法渲染的合成图像对的数据集,以及相应的众包高级感知属性评分。我们展示了我们的材料编辑框架优于现有技术水平,并展示了它在合成图像,真实世界的野外照片和视频序列中的适用性。
作者:J. Daniel Subias and Manuel Lagunas
论文ID:2302.03619
分类:Graphics
分类简称:cs.GR
提交时间:2023-02-14