-
题名从传统渲染到可微渲染:基本原理、方法和应用
被引量：4
- 1
-
-
作者
叶子鹏
夏雯宇
孙志尧
易冉
余旻婧
刘永进
-
机构
清华大学计算机科学与技术系
天津大学智能与计算学部
-
出处
《中国科学：信息科学》
CSCD
北大核心
2021年第7期1043-1067,共25页
-
基金
国家自然科学基金(批准号:62002258,61725204)资助项目。
-
文摘
近年来随着图形硬件的快速发展,渲染技术和深度学习技术都飞速发展,可微渲染作为二者之间的桥梁受到了广泛关注.随着许多可微渲染方法的提出,逆渲染等借助可微渲染工具的应用也随之蓬勃发展.本文从传统渲染管线开始介绍,逐步引入可微渲染的主要思想、基本原理和方法,对它们进行介绍、分析和比较.并介绍基于路径跟踪的可微渲染,随后列出开源的可微渲染工具供大家参考并进行比较.本文后半部分介绍可微渲染的广泛应用,分为人脸、人体、人手和物体4个方面.最后列举了一些可微渲染可能的发展方向.
-
关键词
可微渲染
逆渲染
三维重建
人脸重建
渲染
-
Keywords
differentiable rendering
inverse rendering
3D reconstruction
face reconstruction
rendering
-
分类号
TP391.41
[自动化与计算机技术—计算机应用技术]
-
-
题名基于帧间一致性的自监督室内逆渲染
- 2
-
-
作者
张振峰
李亚男
陈一帆
黄初华
-
机构
贵州大学计算机科学与技术学院公共大数据国家重点实验室
-
出处
《计算机应用研究》
CSCD
北大核心
2023年第7期2204-2209,共6页
-
基金
国家自然科学基金资助项目(62162007)
贵州省自然科学基金资助项目(黔科合基础[2019]1088)。
-
文摘
针对目前逆渲染监督学习方法难以获得标签、泛化能力差的问题,提出了一种基于IFC(inter-frame coherence)的自监督训练方法。由于逆渲染问题的不适定性,引入额外的反照率一致性损失和交叉渲染损失强化自监督网络,其主要思想是对连续光照变化的图像序列执行IFC约束。即通过图像帧之间的位姿图和深度图,在相邻帧之间执行图像投影和扭曲;通过这种方法在相邻帧之间建立约束,并使用孪生训练来确保对光度不变量的一致估计。该方法使用完全卷积神经网络从室内视频序列中恢复几何形状、反射率和光照。自监督网络使用没有标签的连续帧图像集合进行训练,通过结合可微分渲染器,使网络以自监督的方式进行学习。通过与其他主流方法的比较,定量和定性实验结果表明提出方法在多个基准上表现更优。
-
关键词
逆渲染
光照估计
自监督学习
帧间一致性
交叉渲染
-
Keywords
inverse rendering(IR)
illumination estimation
self-supervised learning
inter-frame coherence
cross-rendering
-
分类号
TP391.41
[自动化与计算机技术—计算机应用技术]
-
