当前位置: 首页 > news >正文

聊聊LightProbe原理实现以及对LightProbe数据的修改

0x00 前言

最近工作比较忙,所以文章已经很久没有更新了。这篇小文的主题也是在出差的高铁上想到,因为最近和一些朋友聊天,发现他们中很多人的项目中都使用了多个实时光源。细问之下主要是某些物体,例如角色,在烘焙后的场景中显得不够突出,为了突出角色所以加入了更多的实时光源。但事实上这可能并非一个很好的选择。

0x01 间接光还是直接光

下面这张图片演示了只有直接光照以及加上了间接光照之后的对比。
GI_comparison_1.png
可以看到,直接光照抵达不到的地方的黑暗的部分要通过间接光照来照亮,而不是为了提高暗部的亮度再加一盏实时灯光。
事实上,如果场景中有大量的灯光——例如如果在上图中为室内增加大量补光来提高室内亮度——
还会造成场景中的明暗对比降低,画面显得更“平”。
这也是很多朋友的项目中场景中存在的一个比较常见的问题,即亮度不够灯光补。补着补着才发现,整个场景已经充斥了太多的灯光了,而场景也因此整体很亮,没有了明暗对比,结果就是视觉效果平的不真实。
相信各位也一定想到了,亮度不够灯光补这个思路的另一个实践——场景内的角色不够亮时也选择使用一个灯光来给角色补光——同样存在着和之前所说的一样的问题。
那么怎么提亮角色才更加合理一些呢?(虽然提亮角色这件事本身就不符合物理规则,但是为了游戏效果显然存在这样的需求)。如上图所示那样,利用间接光来照亮物体是一个不错的思路,不够亮?提高间接光的亮度。
在Unity中如何给动态物体提供间接光?这就引出了下面的主角——LightProbe。

0x02 LightProbe的核心

LightProbe主要解决了如何在动态对象和角色上使用烘焙的照明信息。
其实LightProbe的核心就是球面亮度信号编码和重建。
Light-Probe-Interpolation-Using-Tetrahedral

如果大家了解信号处理方面的知识的话,就会知道只要信号满足一定条件,就可以分解为一系列正弦谐波的和,谐波频率以倍频增长,这就是所谓的傅立叶级数。
而lightprobe也采用了类似的思路,使用了球谐函数来对该球面上的亮度信号进行编码。

同样的,一个原始的亮度信号也可以分解为一系列带缩放参数的基函数之和,而我们只需要知道这些基函数的缩放系数就可以在运行时快速的重建原始的亮度信号了。
Spherical_Harmonics.png

但是有一个问题,那就是如果要完美的重建原始光照信号的话,显然需要很多很多甚至是无穷项球谐函数。但是好在LightProbe中保存的主要是一些低频的光照信息,换句话说,它没有高频率变化,所以如果我们通过丢弃所有更高的频率来压缩球体上的频域数据,没有人会注意到。所以这里我们可以只取有限的低频谐函数。

在Unity中,烘焙GI的LightProbe采用了3阶球谐函数(9个参数),实时GI中的LightProbe采用了2阶球谐函数(4个参数)。
OK,信号编码的问题解决了,另一个问题即在运行时如何重建亮度信号。其实使用lightprobe的开销很低,因为只需要将缩放系数与其对应的基函数相乘之后再求和的结果就是近似的原始信号。

接下来我来看看一个Unity中的LightProbe中保存了哪些数据吧。
屏幕快照 2018-04-20 下午12.23.56.png

在Unity中,我们可以使用脚本将场景内的LightProbe保存为一个Asset,并且只要保证使用文本格式进行序列化,我们就可以直接查看其数据内容了。

AssetDatabase.CreateAsset(Instantiate(LightmapSettings.lightProbes), "Assets/lightProbe.asset");

首先能够注意到的是“m_Tetrahedra”部分。
屏幕快照 2018-04-21 上午9.27.39.png
这个其实就是在运行时LightProbe插值时需要用到的四面体数据。因为如果要进行插值,显然要知道需要哪几个点来插值,同时还需要知道每个点的权重各是多少。
在Unity中会根据角色所在的位置,选择四面体,然后使用组成四面体的点进行插值,当然还可以确定每个点的权重。
屏幕快照 2018-04-21 上午9.34.55.png

在靠后的位置,我们还可以找到烘焙后的球谐函数的系数。
屏幕快照 2018-04-21 上午9.48.20.png

可以看到9个参数3个通道所以每一个点总共有27个float数据。
综上,可以看到在使用LightProbe时,计算开销并不大,相对来说比较大的开销主要来自对内存的占用。

0x03 修改LightProbe数据 提亮角色

ok,简单介绍了一下LightProbe的原理以及实现。下面我们还是回到最初的问题,那么怎么提亮一个场景内的角色才更加合理一些呢?
事实上我们可以通过修改烘焙后的LightProbe的数据来实现这样的需求。
light1.png
可以看到上图中,角色已经和场景融为了一体。虽然这样更加真实和符合物理规则,但是我想对很多人来说这显然不是一个好的效果。角色还是能更加突出的好。
好在Unity提供了获取烘焙后的LightProbe数据的接口:

  var probes = LightmapSettings.lightProbes.bakedProbes;

bakedProbes内保存的是一堆“SphericalHarmonicsL2”对象,只要修改SphericalHarmonicsL2的缩放比例就可以修改LightProbe所提供的亮度了。
除了修改亮度之外,有时我们也会想让角色有不同的环境光效果,以更加突出角色。这时我们就可以通过SphericalHarmonicsL2中定义的AddAmbientLight方法来实现了:

  probe.AddAmbientLight(color);

提亮和修改环境色之后,我们的角色在场景中就成了下面这样。比实时光更加自然和开销更低。
light2.png

当然,这里只是抛砖引玉,欢迎大家来讨论。
相关的脚本,可以在这里获取:
https://github.com/chenjd/LightProbeEditor

ref:

https://en.wikipedia.org/wiki/Delaunay_triangulation
https://www.gdcvault.com/play/1015312/Light-Probe-Interpolation-Using-Tetrahedral
https://en.wikipedia.org/wiki/Spherical_harmonics

相关文章:

  • BZOJ4827:[AH2017/HNOI2017]礼物——题解
  • 1分钟了解比特币
  • Java8 中增强 Future:CompletableFuture
  • 精彩源于起点——2018年潍坊市首次青少年Python编程公开课
  • 远程连不上服务器 解决方案
  • Python十分钟制作属于你自己的个性logo
  • ​七周四次课(5月9日)iptables filter表案例、iptables nat表应用
  • 并发容器与框架——Fork/Join框架
  • Hadoop2.4.1的HA的配置与启动
  • Unity全新的版本发布计划(2018)
  • Ora 28040
  • 2016中国“互联网+”创业创新大赛(西北+山西)赛区决赛成功举办 优秀项目将会师海口...
  • python 文件调用其他路径
  • 每日linux命令之kill
  • 双杠仰卧起坐
  • avalon2.2的VM生成过程
  • centos安装java运行环境jdk+tomcat
  • Java 实战开发之spring、logback配置及chrome开发神器(六)
  • java取消线程实例
  • php面试题 汇集2
  • python3 使用 asyncio 代替线程
  • ReactNative开发常用的三方模块
  • Redis 中的布隆过滤器
  • 函数式编程与面向对象编程[4]:Scala的类型关联Type Alias
  • 缓存与缓冲
  • 今年的LC3大会没了?
  • 前端每日实战 2018 年 7 月份项目汇总(共 29 个项目)
  • 前嗅ForeSpider教程:创建模板
  • 世界编程语言排行榜2008年06月(ActionScript 挺进20强)
  • 数据库写操作弃用“SELECT ... FOR UPDATE”解决方案
  • 一天一个设计模式之JS实现——适配器模式
  • 《码出高效》学习笔记与书中错误记录
  • 翻译 | The Principles of OOD 面向对象设计原则
  • !! 2.对十份论文和报告中的关于OpenCV和Android NDK开发的总结
  • # 透过事物看本质的能力怎么培养?
  • ###C语言程序设计-----C语言学习(3)#
  • (20050108)又读《平凡的世界》
  • (2021|NIPS,扩散,无条件分数估计,条件分数估计)无分类器引导扩散
  • (ibm)Java 语言的 XPath API
  • (NSDate) 时间 (time )比较
  • (TOJ2804)Even? Odd?
  • (八)Flask之app.route装饰器函数的参数
  • (附源码)springboot教学评价 毕业设计 641310
  • (剑指Offer)面试题41:和为s的连续正数序列
  • (考研湖科大教书匠计算机网络)第一章概述-第五节1:计算机网络体系结构之分层思想和举例
  • (四)库存超卖案例实战——优化redis分布式锁
  • (译)2019年前端性能优化清单 — 下篇
  • (译)计算距离、方位和更多经纬度之间的点
  • (正则)提取页面里的img标签
  • (转)编辑寄语:因为爱心,所以美丽
  • (转)视频码率,帧率和分辨率的联系与区别
  • .NET 设计模式—简单工厂(Simple Factory Pattern)
  • .NET 中 GetHashCode 的哈希值有多大概率会相同(哈希碰撞)
  • .NET中使用Protobuffer 实现序列化和反序列化
  • .ui文件相关