unity透明通道加颜色_在Unity中实现光栅化渲染

Overview

在Unity中实现光栅化渲染只是为了深入理解光栅化渲染的流程和细节，使用的算法大多没有经过优化，使用到Unity的功能：

• CommandBuffer显示光栅化结果
• 数学计算
• 模型加载
• 纹理加载

需要注意的是：

• Unity中的世界空间是左手坐标系，观察空间是右手坐标系
• Unity中三角形顶点顺序为顺时针的当作正面
• Unity中向量是行矩阵

https://github.com/Litmin/SoftRenderer-Unity​github.com

光栅化渲染是一种古老的技术，从1960年到1980年间开发出来，也是现在GPU用来生成3D图形的技术，近几年NVIDIA才推出了支持光线跟踪的GPU。虽然它很古老，但是没有被废弃，从GPU诞生以来，虽然各种硬件技术不断发展，但是基本的光栅化技术并没有太多变化。

光栅化和光线跟踪这两种算法都是为了解决可见性和着色问题，但是算法的思想是完全相反的。光线跟踪首先遍历图像上的每一个像素，朝每一个像素发射一条射线，然后遍历每个几何体，射线与几何体相交距离最近的点就是可见的点。而光栅化首先将每个几何体投影到屏幕上，然后遍历每个像素，把被几何体覆盖的像素填充。

相对于光线跟踪，光栅化是个很优雅的算法，光线跟踪处理光线和几何体求交是复杂的，光栅化的两步都是非常简单和快速的。

投影

光栅化的第一步就是把3D空间的顶点变换到屏幕空间，这一步变换就叫投影，图形API中一般由Model、View、Projection Transform来表示这一步。

投影分为正交投影和透视投影，透视投影会模拟人眼的效果，有近大远小的特点，正交投影则没有。透视投影还有一条特性就是保留了直线，但是没有保留距离。

正交投影在空间中表示成一个长方体，在长方体内的顶点能被显示在屏幕上。第一步把长方体缩放成范围在[-1,1]的正方体，然后变换到屏幕空间，也就是[0,width][0,height]。

透视投影表示的空间是一个方平截头体，也叫视锥体，可以看成把视锥体挤压成长方体（也就是投影到近平面），然后再进行正交投影。关于投影的推导：

litmin：渲染管线中的坐标变换

litmin：Tips of Transformation

Edge Function

有了屏幕上的顶点，就能组装成图元，最常用的就是三角形，如果可以不填充像素，只画三角形的边缘，这种模式叫做WireFrame，可以使用Bresenham算法来画直线。

如果需要填充三角形覆盖的像素，就需要把位于三角形内的像素填充上颜色。我们可以使用向量的叉积来判断一个点在一条直线的左边还是右边，如果一个点在三角形的三条边的同一侧，那这个点就在三角形内 。

向量叉乘的方向在右手坐标系中使用右手定则确定，在左手坐标系中使用左手定则确定。

这里需要注意不管是在右手坐标系还是左手坐标系，叉乘向量的数值结果是一样的，只不过表示的绝对向量方向不同，Unity中是左手坐标系，遵循左手定则。

private 

Depth Buffer

当画多个三角形时，如果确定显示哪个三角形呢？

画家算法（油画家）是一种方法，首先绘制较远的物体，然后绘制较近的物体，这样近的就能覆盖远的。

当多个几何体互相重叠的时候，画家算法就处理不了。画家算法现在还被用在透明物体上。

深度缓冲可以解决这种问题，深度缓冲就是一个屏幕大小的浮点数数组，初始化为一个非常大的值，在屏幕上画一个像素时，比较这个点的深度和深度缓冲中对应位置的深度，如果这个点的深度比较小，就表明这个点离相机更近，就可以画这个像素，同时更新深度缓冲。如果这个点的深度大，就表明这个点离相机更远，被其他物体遮挡，就不能画这个像素。

Shading

确定好哪些像素需要填充后，就要给这些像素一个颜色，这个步骤就叫shading（着色），所以shader就叫着色器 。如果给每一个三角形指定一个颜色，那到这一步就可以显示出一个纯色的三角形来了。这种每一个面计算一个颜色就叫Flat Shading，逐顶点计算叫Gouraud Shading,逐像素计算叫Phong Shading,这个Phong Shading指的不是那个光照模型，也是那个大佬提出来的，所以就叫这个了。

逐顶点计算颜色时，我们可以给每个顶点一个颜色，但是三角形内的像素点该是什么颜色呢？同样，在逐像素计算时，每个像素计算所需要的属性又怎么来呢？这就需要插值得到。

重心坐标插值

重心坐标就是以三角形的三个顶点组成的坐标系表示的坐标，三角形的平面上任意一点都可以用重心坐标和三个顶点来表示（V0，V1，V2是三角形的三个顶点）：

重心坐标可以是任意值，但是对于三角形内的顶点，它们的范围是[0,1]，而且它们的和等于1：

重心坐标计算：

三角形V0_V1_V2的面积：

A：V0V1，B：V0V2，叉乘向量的模就是平行四边形的面积，向量又垂直于xy平面，所以xy都为0，所以面积就是z坐标的值

如果一点P在三角形内，那三角形的面积就是P跟另外三个顶点组成的三个三角形面积的和：

点P开始在V1V2这条边上，慢慢朝V0移动：

当P在V1V2上时，P的坐标就是V1和V2的线性插值：

用重心坐标来表示，其中λ0 = 0：

P距离V1比较近，因此λ1比λ2大，而且绿色三角形比紫色三角形要大，红色三角形不可见，所以λ0等于0.所以重心坐标和三角形的面积之间可能有某种关系，也就是λ0和红色三角形相关，λ1和绿色三角形相关，λ2和紫色三角形相关。

当P移动到V0的位置，λ0等于1，λ1，λ2等于0，P = V0，红色三角形的面积就等于大三角形的面积。

从以上观察中可以发现，重心坐标跟这个顶点的对边与P组成的三角形的面积有关。

这是凭感觉推导的计算公式，还有更严谨的数学推导：

既然这个点的位置可以插值三个顶点的位置得到，那三角形内一个点的其他属性也可以通过这样来插值三个顶点的属性得到，例如颜色：

计算重心坐标需要的每个三角形的面积都可以用判断点是否在三角形内时叉乘的结果，因为叉乘向量的模就是两个向量组成的平行四边形的面积。

透视矫正插值

如果使用透视投影，直接使用重心坐标插值UV，就会得到这样的结果：

正确的结果应该是：

深度插值矫正

如果投影后的点的z存储的就是在View Space下的z，插值三角形内的一个点的深度就是：

这样做结果是不对的，因为投影后的z在屏幕空间不是线性的。

图中绿线表示近平面，距离原点为1，已知P投影到近平面的点是（0，1），我们的目标是求出点P的z坐标，两个点投影到近平面，它们的x坐标可以求出来：

直接使用插值计算出来P的z坐标：

很显然结果是不对的。下面推导正确的公式：

在View Space有两个点P0（X0，Z0）P1（X1，Z1），投影到近平面的点是S0、S1，S（X，1）是S0S1上一点，对应的View Space下点P（X，Z），t和q定义如下：

还可以写成：

P点的X、Z坐标：

S表示S点的x坐标：

把上面等式代入：

再代入S0和S1：

再把左边的Z替换：

化简的出来t：

把t代入Z的插值公式：

推导过程总结出来就是：已知观察空间中深度由两个顶点插值的系数，求出投影点X坐标插值系数和深度插值的关系。

在屏幕空间中Z的倒数是线性的，这就是为什么图形API中投影变换后深度值变为倒数。

顶点属性插值矫正

跟深度值一样，其他属性也不能直接插值。

有一个正方体，点P在正方体的中心，V1颜色是（1，1，1），V2颜色是（0，0，0），很显然P的颜色应该是（0.5，0.5，0.5）。

当以不同的角度观察时，P就不在中心了，这是透视投影导致的，因为透视投影保留了直线，但是没有保留距离。因为重心坐标是在屏幕空间计算的，只考虑了xy，但是插值的点其实是在3D空间中，只需要先把它还原回3D空间中再插值就可以了。透视投影中x、y需要除以z来投影到近平面，乘以z就可以还原到3D空间，所以正确的插值应该是：

数学推导：

三角形上两个点的深度为Z0，Z1，颜色为C0，C1，我们可以用线性插值来求出这两个点之间的一点P的深度值，对于颜色值也可以使用相同的线性插值求出来，所以有：

因为P的深度值的倒数在屏幕空间是线性的：

代入第一个等式的左边，化简（先乘Z0Z1）：

求出C：

用1/Z0Z1化简：

透视矫正插值和深度插值的特殊处理都是透视投影才需要的，使用正交投影，直接用重心坐标来插值深度和顶点属性都是正确的。

Face Culling

可以指定不渲染三角形的正面或者背面，通过两条边叉乘的向量的方向来确定是正面还是背面。

// Cull,Unity中三角形顺时针为正面

Lighting

插值完成后，使用各个属性计算光照，这里使用简单的Blinn Phong光照模型，最终结果：

Reference：

https://www.scratchapixel.com/lessons/3d-basic-rendering/rasterization-practical-implementation/overview-rasterization-algorithm​www.scratchapixel.com