展示型企业网站建设,百度资源分享网,最好科技广州网站建设,广州域名企业网站建站哪家好文章目录 一、渲染方程及其挑战二、基础光照解决方案-简化版简化光源简化材质简化阴影 三、基于预计算的全局光照3.1挑战和计算思路傅里叶变换球谐函数#xff08;Spherical Harmonics#xff09; 3.2 SH Lightmap#xff1a;预计算 GI3.3 探针 Probe#xff1a;Light Prob… 文章目录 一、渲染方程及其挑战二、基础光照解决方案-简化版简化光源简化材质简化阴影 三、基于预计算的全局光照3.1挑战和计算思路傅里叶变换球谐函数Spherical Harmonics 3.2 SH Lightmap预计算 GI3.3 探针 ProbeLight Probe Refection ProbeLight ProbeRefection Probe 3.4 基于图像的光照Image-Based LightingIBL) 四基于物理的材质4.1 微平面理论4.2 IBL放到3.4去了但实际理论与PBR很相近 四阴影Shadow4.1大世界Cascade Shadow级联阴影4.2 软阴影4.3 Virtual Shadow Maps 总结5-10年前流行的3A配置技术展望过量shader 渲染计算的三大组成部分Lighting、Material、Shader
一、渲染方程及其挑战
参见闫令琪老师101中BRDF和渲染方程导论 和 cook-torranceBRDF方程计算
老师认为的图形学的三个挑战
对于任一给定方向如何获得radiance–阴影对于光源和表面shading的积分运算蒙特卡洛积分对于反射光多Bounce的无限递归计算
二、基础光照解决方案-简化版
简化光源
用平行光、聚光灯、点光源作为MainLight 来简化各种光源用Ambient Light替代光源外的环境光用可采样的环境贴图代替反射光线环境贴图的mipmap代替粗糙度表现
最终结果 MainLight Ambient LightEnvironment Map
简化材质 Blinn-Phong模型
基于光可叠加原理渲染方程中用体现Blinn-Phong模型通过Ambient Diffuse Specular来简单粗暴的着色。
但其也有缺点 能量不保守使用Blinn-Phong模型的出射光照能量可能大于入射光照的能量这在计算光线追踪时会带来很大的问题这一过程在光线追踪中经过无限次反弹后会使得本该暗的地方变得过于明亮。 难以表现真实的质感Blinn-Phong模型虽然比较经典但它却很难表现出物体在真实世界中的模样总是有一种”塑料“感。
简化阴影
最常见的处理方式就是Shadow Map先在光源处放置相机以z-buffer的方式储存一张深度缓冲第二次将相机放置在view位置并将视锥内的点的深度和深度缓冲中的对应点矩阵变换的深度进行对比若前者大于后者则认为视锥中的点处于阴影中
缺点 光源处的采样率和观察处的采样率不一样有分辨率限制同时光源角度大时会出现自阴影锯齿的问题
三、基于预计算的全局光照
3.1挑战和计算思路
空间换时间
挑战 indirect Light 要想去采样整个球面数据量非常大需要有合适的方式压缩并且还得便于在渲染方程中进行积分
傅里叶变换
可以把空间域信号转变为频域信号截取频域的一小段就可以实现对频率整体的一个粗糙的表达还可以反傅里叶计算还原会空间域。高效压缩 卷积定理是傅立叶变换满足的一个重要性质。卷积定理指出函数 卷积的 傅立叶变换是函数傅立叶变换的乘积。具体分为时域卷积定理和频域卷积定理时域卷积定理即时域内的卷积对应频域内的乘积频域卷积定理即频域内的卷积对应时域内的乘积两者具有对偶关系。 球谐函数Spherical Harmonics
SH是拉普拉斯方程的一组限制在球上的解可以理解为一组sin\cos组成的正交基数量越多可以表达的精度越高并且相互之间正交卷积为0–简化计算的核心且二阶导数为0拟合表面光滑 一般实时渲染只取前3阶就够了9个因为一般只需要低频信息因此也无法表达更高频有时只需要知道光从哪里来就只需0和1阶就够了4个如下图。「在这种情况下压缩后只用32bits4Bytes就可以存储一个像素的颜色。卷积时先投影到SH正交基上再系数相乘即可」
3.2 SH Lightmap预计算 GI
有了SH我们就可以将场景参数化到一张巨大的lightmap贴图上通常被称为地图集atlas对所有表面点的irradiance进行离线计算并压缩为SH系数、保存进atlas
计算过程 对世界物体进行几何简化因为要把三维空间复杂集合投影到二维空间如下图并且参数分配时需要尽可能在同样的面积或体积内分配的texel精度近似 lighting将lightmap映射到各级LOD上应用模型细节用HBAO(水平基准环境光遮蔽Horizon based ambient occlusion升级版SSAO)加上短程short-range增加高频的灯光细节再加上直接光照和材质的效果----下图1是单应用lightmap的光照效果可以看到已经有很多细节和软阴影效果了下图2是最终应用效果
Lightmap优缺点和可借鉴思想
优点 1.实时运行效率很高 2.可以表现出环境中全局光照的许多细节缺点 1.预计算时间非常长因此老师自己的引擎宁死不用 2.只能处理静态场景物体和静态光照动态物体会有类似人物走到一小块阴影里整个人变黑的bug 3.空间换时间占用内存较大几十到几百MB可借鉴优秀思想 空间换时间把整个场景参数化到二维的tex上或三维vol上也一样方便计算
3.3 探针 ProbeLight Probe Refection Probe
优点运行效率高静动态物体都可用可以处理漫反射和镜面反射缺点大量的光探测SH需要预计算没办法做到像lightmap那样那么好的细节采样太稀疏
Light Probe
在空间中放置很多采样点每个采样点采集对应光场信息物体经过时寻找附近的采样点并插值计算
自动探测点生成空间内均匀的产生采样点再根据玩家的可到达区域和建筑物的几何结构进行延拓相对均匀的分布采样点
Refection Probe
类似的反射probe数量少但采样精度很高应用在镜面等场景
3.4 基于图像的光照Image-Based LightingIBL)
主要思路还是预计算把复杂的积分都先预计算过以减少光照中的计算时间。我们会分别预计算漫反射项和镜面项最终在实时渲染中只需通过简单的纹理采样即可得到结果
diffuse:提前将cubemap与反射光卷积的结果计算并储存在Irradiance Map中使用时只需要取位置上的结果就可以了见下图左specular:近似为Lighting Term和BRDF Term的乘积 Lighting Term由于不同粗糙度造成的高光结果不一样用cubemap的minmap存储多个粗糙度的结果用minmap的精度刚好对应不同粗糙度下的不同精度见下图右BRDF Term直接预计算保存到了一张LUT图里使用F和粗糙度加载即可 四基于物理的材质
4.1 微平面理论
见闫老师相关课程笔记 games101Microfacet微平面理论cook-torranceBRDF方程计算 games202五基于物理的材质Microfacet、Kulla-Conty估计、LTC、NPR
迪士尼材质参数的设计原则思路相当有参考性 物理材质参数应当直白易懂符合艺术家的直觉让艺术家能理解材质参数应当尽可能的少参数取值范围尽量是0-1超过合理范围时最好能产生一个make sense的结果各种参数的组合应当合理且有意义(每一个参数组合都有意义)
4.2 IBL放到3.4去了但实际理论与PBR很相近
四阴影Shadow
4.1大世界Cascade Shadow级联阴影
对视锥体进行分层远处的精度降低近处提高。
需要优化点blend between Cascade Laters在层级之间边界的地方做插值以避免出现视觉断层。优点解决透视混叠perspective aliasing问题快速生成深度图深度写入时可提升3倍效果不错缺点存储空间大空间换时间绘制时成本昂贵几乎不可能生成高质量的区域阴影没有彩色阴影半透明投射出不透明阴影
4.2 软阴影
详情见闫老师的课程games202二实时阴影Shadow Mapping、软阴影PCF、PCSS、VSSM、MSM、SDF
PCFPercentage Closer FilterPCSSPercentage Closer Soft ShadowVSSMVariance Soft Shadow Map)
4.3 Virtual Shadow Maps
原理类似Tiled Virtual Texture 现代引擎可以关注这个方向 UE5中VirtualShadowMap的简易实现原理一
总结
5-10年前流行的3A配置
LightmapLightProbePBRIBLCascade shadow VSSM
技术展望
GPU显卡快速升级 real-time Ray-Tracing on GPU Real-Time Global IlluminationSSGI、SDF based GI、Voxel-based GI(SVOG/VXGI)、RSM/RTX GI 更复杂的材质模型BSSRDF、BSDF(Strand-based hair)
过量shader
艺术家搞出大量shadergraph程序员给shader的各种变化都写了单独的shader不就是我们公司不同平台编译语言不同
Uber Shader每一种变化组合都写入同一个shader通过宏定义控制分支会产生大量变体 优点某个算法改进时需要更新所有相关shader容易出错用Uber shader就不会有这个问题
