（十五）unity shader基础之——————基础纹理：中篇（凹凸映射、法线纹理、高度纹理）-CSDN博客

本文链接：https://blog.csdn.net/cgy56191948/article/details/102607089

纹理的另一种常见的应用就是凹凸映射。凹凸映射的目的是使用一张纹理来修改模型表面的法线，以便为模型提供更多的细节。这种方法不会真的改变模型的顶点位置，只是让模型看起来好像是“凹凸不平”的，但可以从模型的轮廓看出“破绽”。

有两种主要的方法可以用来进行凹凸映射：一种方法是使用一张高度纹理（height map）来模拟表面位移，然后得到一个修改后的法线值，这种方法又被称为高度映射；另一种方法则是使用一张法线纹理来直接存储表面法线，这种方法又被称为法线映射(normal mapping)。尽管我们常常将凹凸映射和法线映射当成是相同的技术，但我们需要知道它们之间的不同。

一、高度纹理

首先看第一种技术，即使用一张高度图来实现凹凸映射。高度图中存储的是强度值(intensity)，它用于表示模型表面局部的海拔高度。因此颜色越浅表明该位置的表面法线越向外凸起，而颜色越深表明该位置越向里凹。这种方法好处是非常直观，我们可以从高度图中明确地知道一个模型表面的凹凸情况，但缺点是计算更加复杂，在实时计算时不能直接得到表面法线，而是需要由像素的灰度值计算而得，因此需要消耗更多的性能。

高度图通常会和法线映射一起使用，用于给出表面凹凸的额外信息。也就是说我们通常会使用法线映射来修改光照。

二、法线纹理

而法线纹理中存储的就是表面的法线方向。由于法线方向的分量范围在[-1,1]，而像素的分量范围为[0,1]，因此我们需要做一个映射，通常使用的映射就是：

pixel=(normal+1)/2;

这就要求，我们在shader中对法线纹理进行采样后，还需要对结果进行一次反映射的过程，以得到原先的法线方向。反映射的过程实际上就是使用上面映射函数的逆函数：

normal=pixel*2-1；

然而，由于方向是相对于坐标空间来说的，那么法线纹理中存储的法线方向在哪个坐标空间中呢？对于模型顶点自带的法线，它们是定义在模型空间中的，因此一种直接的想法就是将修改后的模型空间中的表面法线存储在一张纹理中，这种纹理被称为模型空间中的法线纹理。然而在实际制作中，我们往往采用另一种坐标空间，即模型顶点的切线空间来存储法线，对于模型的每个顶点，都有一个属性自己的切线空间，这个切线空间的原点就是该顶点本身，而z轴是顶点的法线方向n，x轴是顶点的切线方向t，而y轴可由法线和切线叉积而得，也被称为副切线或副法线。如下图：

这种纹理被称为切线空间的法线纹理，下图分别给出了模型空间和切线空间下的法线纹理：

从图中可以看出，模型空间下的法线纹理看起来是五颜六色的，这是因为所有法线所在的坐标空间是同一个坐标空间，即模型空间，而每个点存储的法线方向是各异的，有的是(0,1,0)，经过映射后存储到纹理中就对应了RGB（0.5，1,0.5）浅绿色，有的是(0,-1.0)，经过映射后存储到纹理中就对应了(0.5,0,0.5)紫色。而切线空间下的法线纹理看起来几乎全是浅蓝色的。这是因为每个法线方向所在的坐标空间是不一样的，即表面每点各自的切线空间。这种法线纹理其实就是存储了每个点在各种的切线空间中的法线扰动方向。也就是说，如果一个点的法线方向不变，那么在它的切线空间中，新的法线方向就是z轴方向，即值为(0,0,1)，经过映射后存储在纹理中就对应了RGB（0.5，0.5,1）浅蓝色。而这个颜色就是法线纹理中大片的蓝色，这些蓝色实际上说明顶点的大部分法线是和模型本身的法线一样的，不需要改变。

总体来说，模型空间下的法线纹理更符合人类的直观认识，而且法线纹理本身也很直观，容易调整，因为不同的法线代表了不同的颜色。但美术人员往往更喜欢使用切线空间下的法线纹理，那么这是为什么呢？

实际上法线本身存储在哪个坐标系都是可以的，我们甚至可以选择存储在世界空间下。但问题是我们并不是单纯的想要得到法线，后续的光照计算才是我们的目的。而选择哪个坐标系意味着我们需要把不同信息转换到相应坐标系中。例如如果选择了切线空间，我们需要把从法线纹理中得到的法线方向从切线空间转换到世界空间（或其他空间）中。

总体来说，使用模型空间来存储法线的优点如下：

1.实现简单，更加直观。我们甚至都不需要模型原始法线和切线等信息，也就是说计算更少。生成它也非常简单，而如果要生成切线空间下法线纹理，由于模型的切线一般是和uv方向相同，因此想要得到效果比较好的法线映射就要求纹理映射也是连续的。

2.在纹理坐标的缝合处和尖锐的边角部分，可见的突变（缝隙）较少，既可以提供平滑的边界。这是因为模型空间下的法线纹理存储的是同一坐标系下的法线信息，因此在边界处通过插值得到的法线可以平滑变换。而在切线空间下的法线纹理中的法线信息是依靠纹理坐标的方向得到的结果，可能会在边缘处或尖锐的部分造成更多可见的缝合迹象。