在 iPad 上试验从用算法生成法线贴图-到法线映射光照效果

在 iPad 上试验从用算法生成法线贴图-到法线映射光照效果

目录

概述

一般来说, 法线贴图是用高模的法线图, 低模的纹理图, 来生成较好的渲染效果. 而法线图通常是通过图像处理软件来生成的, 这里我们准备尝试用程序来生成法线图, 输入只有纹理图, 没有高度图.

那么这种方法究竟可行不可行? 答案是可行, 例如比较受欢迎的 CrazyBump 就是直接通过算法以纹理贴图未输入生成法线图, 不过具体算法就不清楚了, 接下来我们会进行各种试验, 来看看如何用算法生成能达到专业图像处理软件生成水准的法线图.

第一次脑洞

在对法线图有一点印象后, 我们打算先把纹理贴图转换为灰度图, 可以很明确地表示贴图表面的明暗程度, 再把灰度值转换为高度值--也就是z值(相当于高度图), 再利用原来的 x,y 坐标一起生成空间的向量坐标, 再求出该向量坐标对应的法线向量, 然后利用该法线向量生成法线图.

目前的问题是 z 值相对于 xy值有些太小, 所以把 xy 值缩小 2000 倍, 可以得到一张类似于法线图的蓝紫色图片, 但是跟实际的法线图对比, 还是不够好.

这个算法用 OpenGL ES Shader 实现, 主要是为了充分利用 GPU 来提高绘图速度, 代码如下:

-- 用来生成法线图的 shader
genNormal = {
vs = [[
attribute vec4 position;
attribute vec4 color;
attribute vec2 texCoord;
 
varying vec2 vTexCoord;
varying vec4 vColor;
varying vec4 vPosition;
 
uniform mat4 modelViewProjection;
 
void main()
{
    vColor = color;
    vTexCoord = texCoord;
    vPosition = position;
    gl_Position = modelViewProjection * position;
}
]],
fs = [[
precision highp float;
 
varying vec2 vTexCoord;
varying vec4 vColor;
varying vec4 vPosition;

uniform sampler2D texture;
 
// 纹理贴图
uniform sampler2D tex;
void main()
{
    //Sample the texture at the interpolated coordinate
    lowp vec4 col = texture2D( texture, vTexCoord );
    
    // vec4 normal = normalize(col.rgba);
    //彩色法线效果. 法向图
    // gl_FragColor = vec4(fmod( (normal.xyz+1.)/2.,1.0), 1.);
    
    // 先求像素点的灰度值
    float grey = 0.2126*col.r + 0.7152* col.g + 0.0722*col.b;
    //把范围为 [0, 1.0] 的颜色值变换为范围为 [-1.0, 1.0] 的法线值

    vec3 pos3D = vec3(vPosition.x, vPosition.y, grey);
    vec3 greyCol = vec3(grey,grey,grey);
    
    // 把灰度值作为 z 轴坐标, 组合出立体空间的 vec3 坐标
    //vec3 normal = normalize(vec3(vPosition.x*2.-1., vPosition.y*2.-1., grey*2.-1.));
    vec3 normal = normalize(vec3(vPosition.x/10000., vPosition.y/10000., grey*2.-1.));
    
    // 直接使用灰度图
    gl_FragColor = vec4(greyCol, col.a);
    
    gl_FragColor = vec4((normal.xyz+1.)/2., col.a);

    //Set the output color to the texture color
    // gl_FragColor = col;
}
]]
}

这个算法纯粹是偷懒(开始时不想认真研究法线图)+自由脑洞的产物, 效果奇差, 就不贴图了.

  • 本次试验得到的经验:
    以上代码是在对法线图一知半解的情况下脑洞大开写出来的, 在深入了解法线图的原理后, 就会发现这么去写纯粹是瞎搞, 而且居然一开始就作死直接用 shader 写, 虽然最终跑起来了, 但是调试过程简直是欲仙欲死.

  • 所以结论:
    1.先好好研究明白法线图的概念原理, 再继续试验;
    2.为了提高调试效率, 后续代码一律先在 CPU 上跑, 跑通了再改写成 shader 代码.

用索贝尔算子计算xy法矢量

经过一番研究, 本次试验用 sobel operator 来实现

LUA算法实现

吸取上次的教训, 先写 CPU 代码如下:

-- 法线图生成函数:从高度图(灰度图)生成
-- 确保像素点坐标落在纹理贴图内: (1, pMax)
function clamp(pX, pMax)
    if (pX > pMax) then
        return pMax;
    elseif (pX < 1) then
        return 1;
    else
        return pX;
    end
end

-- 像素点光强度: 高度
function intensity(col)
    -- 计算像素点的灰度值
    --local average = (col.r + col.g + col.b)/3;
    local average = 0.3*col.r + 0.59*col.g + 0.11*col.b
    return average
end

-- 把单位向量从 [-1.0, 1.0] 转换范围到 [0,255] 
function normal2Color(p)
    return (p + vec3(1.0,1.0,1.0)) * (255.0 / 2.0)
end

-- 灰度图生成函数: (原始纹理贴图,强度)
function genGreyMap(img, s)
    local t = image(img.width, img.height)
    for y =1,img.height do
        for x = 1,img.width do
            local r,g,b,a = img:get(x,y)
            local g = (0.3*r+0.59*g+0.11*b) * ( s or 1) 
            t:set(x,y,color(g,g,g,255))        
        end
    end
    return t
end

-- 根据灰度图生成法线图
function greyNormal(img,s)
    local w,h = img.width,img.height
    local temp = image(w,h)
    for y =1,img.height do
        for x = 1,img.width do
            -- 取得周围的像素点的 rgba值(灰度值)
            topLeft  = color(img:get(clamp( x - 1, w), clamp(y + 1, h)))
            top      = color(img:get(clamp( x , w), clamp(y + 1, h)))
            topRight = color(img:get(clamp( x + 1, w), clamp(y + 1, h)))
            right    = color(img:get(clamp( x + 1, w), clamp(y , h)))
            bottomRight    = color(img:get(clamp( x + 1, w), clamp(y - 1 , h)))
            bottom    = color(img:get(clamp( x , w), clamp(y - 1 , h)))
            bottomLeft    = color(img:get(clamp( x - 1, w), clamp(y - 1 , h)))
            left    = color(img:get(clamp( x - 1, w), clamp(y , h)))
            
            -- sobel filter
            dX = (topRight.r + 2.0 * right.r + bottomRight.r) - (topLeft.r + 2.0 * left.r + bottomLeft.r);
            dY = (bottomLeft.r + 2.0 * bottom.r + bottomRight.r) - (bottomLeft.r + 2.0 * top.r + topRight.r);
            dZ = 255 / s;

            newCol = normal2Color(vec3(dX,dY,dZ):normalize()) 
            temp:set(x,y,color(newCol.x, newCol.y, newCol.z, 255))
        end
    end
    return temp
end

生成效果如下:
左边是本算法生成的法线图, 右边是使用图像处理软件得到的法线图:

155931_NqVQ_219279.png
160121_VIhv_219279.png

光照效果, 使用算法生成的法线图
19162921_8v8z.png
19162932_DgT3.png

光照效果, 使用图像处理软件生成的法线图:

19162928_uqv5.png
19162936_gezu.png

跟图像处理软件生成的法线图比较, 发现虽然用上述算法生成的法线图更真实地反映了纹理的表面细节情况, 但是在做法线映射时, 出现的立体效果反而不如经过图像处理软件修饰的法线图, 它把边缘扩散了,边缘部分看起来更光滑, 光线照射起来凸凹感更强.

不过还是希望能达到图像处理软件那种效果, 为此还专门发了一个求助帖根据纹理贴图生成法线图的算法, 如何改进? 感觉更像凹凸图, 结果还没等回应就被N多的新问题被冲得没影了...

shader算法实现

上述算法生成的法线图凑乎还能看, 不过就是生成速度太慢了, 一张 300*225 大小的纹理, 在我的 iPad2 上要跑10秒左右.

既然算法确定了, 那我们就可以放心地把它改写到 GPU 上去了, 结果半小时不到就搞定移植, 看来只要方法对头了, 效率自然就高, shader 代码如下:

-- 用 sobel 算子生成法线图    generate normal map with sobel operator
genNormal1 = {
vs = [[
attribute vec4 position;
attribute vec4 color;
attribute vec2 texCoord;

varying vec2 vTexCoord;
varying vec4 vColor;
varying vec4 vPosition;

uniform mat4 modelViewProjection;

void main()
{
vColor = color;
vTexCoord = texCoord;
vPosition = position;
gl_Position = modelViewProjection * position;
}
]],
fs = [[
precision highp float;

varying vec2 vTexCoord;
varying vec4 vColor;
varying vec4 vPosition;

// 纹理贴图
uniform sampler2D tex;
uniform sampler2D texture;

//图像横向长度-宽度, 图像纵向长度-高度
uniform float w;
uniform float h;

float clamp1(float, float);
float intensity(vec4);

float clamp1(float pX, float pMax) {
    if (pX > pMax) 
        return pMax;
    else if (pX < 0.0)
        return 0.0;
    else
        return pX;   
}

float intensity(vec4 col) {
    // 计算像素点的灰度值
    return 0.3*col.x + 0.59*col.y + 0.11*col.z;
}

void main() {
// 横向步长-每像素点宽度,纵向步长-每像素点高度
float ws = 1.0/w ;
float hs = 1.0/h ;
float c[10];
vec2 p = vTexCoord;
lowp vec4 col = texture2D( texture, p );

// sobel operator
// position.      Gx.            Gy
// 1 2 3     |-1. 0. 1.|   |-1. -2. -1.|
// 4 5 6     |-2. 0. 2.|   | 0.  0.  0.|
// 7 8 9     |-1. 0. 1.|   | 1.  2.  1.|
// 右上角,右,右下角
c[3] = intensity(texture2D( texture, vec2(clamp(p.x+ws,0.,w), clamp(p.y+hs,0.,h) )));
c[6] = intensity(texture2D( texture, vec2(clamp1(p.x+ws,w), clamp1(p.y,h))));
c[9] = intensity(texture2D( texture, vec2(clamp1(p.x+ws,w), clamp1(p.y-hs,h))));

// 上, 下
c[2] = intensity(texture2D( texture, vec2(clamp1(p.x,w), clamp1(p.y+hs,h))));
c[8] = intensity(texture2D( texture, vec2(clamp1(p.x,w), clamp1(p.y-hs,h))));

// 左上角, 左, 左下角
c[1] = intensity(texture2D( texture, vec2(clamp1(p.x-ws,w), clamp1(p.y+hs,h))));
c[4] = intensity(texture2D( texture, vec2(clamp1(p.x-ws,w), clamp1(p.y,h)))); 
c[7] = intensity(texture2D( texture, vec2(clamp1(p.x-ws,w), clamp1(p.y-hs,h))));

// 先进行 sobel 滤波, 再把范围从 [-1,1] 调整到 [0,1]
float dx = (c[3]+2.*c[6]+c[9]-(c[1]+2.*c[4]+c[7]) + 1.0) / 2.0;
float dy = (c[7]+2.*c[8]+c[9]-(c[1]+2.*c[2]+c[3]) + 1.0) / 2.0;
float dz = (1.0 + 1.0) / 2.0;

gl_FragColor = vec4(vec3(dx,dy,dz), col.a);

}
]]
}

写了才发现, 原来 OpenGL ES 2.0 里自带了一个 clamp 函数, 不过需要输入3个参数:pX, pMin, pMax, 跟我们的 clamp 差不多, 为了避免报错, 把我们的 clamp 改为 clamp1.

跑一遍, 速度提升了10倍以上, 不到1秒就生成法线图了. 看来以后写图像处理算法一定要充分发掘 GPU 的潜力.

OK, 第二个试验成功了, 接下来的目标是在这个基础上对边缘做进一步处理, 目测貌似灰度值膨胀算法可以试验一下, 先研究研究再说.

下面是完整源代码:

-- normal mapping
--[[
The Normal Mapping code from Author: @1980geeksquad
Link: https://codea.io/talk/discussion/4674/example-of-normal-mapping
法线贴图光照效果的代码来自 @1980geeksquad
--]]

function setup()
    displayMode(OVERLAY)

    -- 用 shader 生成法线图
    m1=mesh()
    m1Tex = readImage("Dropbox:n1")
    m1.shader=shader(shaders["genNormal1"].vs,shaders["genNormal1"].fs)
    m1.shader.texture = m1Tex
    m1.shader.w, m1.shader.h = m1Tex.width, m1Tex.height   
    -- 单独显示由 shader 生成的法线图
    m1:addRect(m1Tex.width/2,m1Tex.height/2, m1Tex.width, m1Tex.height)
    -- 用 nMap 保存由 shader 生成的法线图
    nMap = image(m1Tex.width, m1Tex.height )
    setContext(nMap)
    m1:draw()
    setContext()    

    
    -- 用 shader 演示法线贴图-法线映射
    m = mesh()
    img = readImage("Dropbox:n1")
    m.shader=shader(shaders["NormalMapping"].vs,shaders["NormalMapping"].fs)
    local w,h = img.width, img.height
    local ws,hs=WIDTH/w, HEIGHT/h
    --ws,hs = 1,1
    
    m.shader.Resolution = vec2(ws,hs)
    m.shader.LightPos = vec3(0,0,0.075)
    m.shader.LightColor = vec4(0.94,0.77,0.17,0.9)
    m.shader.AmbientColor = vec4(0.6,0.6,1.0,0.5)
    m.shader.Falloff = vec3(0.4,2.0,10.0)    
    m:setRectTex(m:addRect(WIDTH/2,HEIGHT/2,WIDTH,HEIGHT),0,0,ws,hs)
    -- the same as above line 手工定义顶点   
    -- m.vertices={vec2(0,0),vec2(WIDTH,0),vec2(0,HEIGHT),vec2(WIDTH,0),vec2(0,HEIGHT),vec2(WIDTH,HEIGHT) }
    -- m.texCoords = {vec2(0,0),vec2(ws,0),vec2(0,hs),vec2(ws,0),vec2(0,hs),vec2(ws,hs)}
    m.shader.tex = "Dropbox:n1"
    m.shader.s_multitex = "Dropbox:n2"
    m.shader.s_multitex = nMap
        
    --[[
    bumpImg = genBumpMap(img,0.007)
    greyImg = genGreyMap(img,1)
    --nMap = genNormalMap(img, 0.8)
    gnMap = greyNormal(greyImg,2)
    -- m.shader.tex = img
    m.shader.s_multitex = gnMap
    --saveImage("Dropbox:grey1",greyImg)
    --saveImage("Dropbox:nmap1",gnMap)
    --]]
    
    tchx=0
    tchy=0
end

function draw()
    background(0)

    -- 设置光源位置坐标
    m.shader.LightPos = vec3(tchx/WIDTH,tchy/HEIGHT,0.015)
    m:draw()
    
    --[[
    m1:draw()
    sprite(bumpImg,WIDTH/2+300,400)
    sprite(greyImg,WIDTH/2+300,150)
    --sprite(nMap,WIDTH/2,450)
    sprite(gnMap,WIDTH/2+350,650)
    sprite("Dropbox:n2",WIDTH/2,650)
    --]]
    sprite(nMap,WIDTH/2,650)
end

function touched(touch)
    if touch.state == BEGAN or touch.state == MOVING then
        tchx=touch.x+50
        tchy=touch.y+50
    end
end

-- 法线图生成函数:从高度图(灰度图)生成
-- 确保像素点坐标落在纹理贴图内: (1, pMax)
function clamp(pX, pMax)
    if (pX > pMax) then
        return pMax;
    elseif (pX < 1) then
        return 1;
    else
        return pX;
    end
end

-- 像素点光强度: 高度
function intensity(col)
    -- 计算像素点的灰度值
    --local average = (col.r + col.g + col.b)/3;
    return 0.3*col.r + 0.59*col.g + 0.11*col.b
end

-- 把单位向量从 [-1.0, 1.0] 转换范围到 [0,255]
function normal2Color(p)
    return (p + vec3(1,1,1)) * (255 / 2)
end

-- 直接从纹理贴图生成法线图
function genNormalMap(img,s)
    local w,h = img.width,img.height
    local temp = image(w,h)
    for y =1,img.height do
        for x = 1,img.width do
            -- 取得周围的像素点的 rgba值(灰度值-亮度)
            topLeft  = color(img:get(clamp( x - 1, w), clamp(y + 1, h)))
            top      = color(img:get(clamp( x , w), clamp(y + 1, h)))
            topRight = color(img:get(clamp( x + 1, w), clamp(y + 1, h)))
            right    = color(img:get(clamp( x + 1, w), clamp(y , h)))
            bottomRight    = color(img:get(clamp( x + 1, w), clamp(y - 1 , h)))
            bottom    = color(img:get(clamp( x , w), clamp(y - 1 , h)))
            bottomLeft    = color(img:get(clamp( x - 1, w), clamp(y - 1 , h)))
            left    = color(img:get(clamp( x - 1, w), clamp(y , h)))
            
            -- 计算得到灰度值
            tl = intensity(topLeft)
            t = intensity(top);
            tr = intensity(topRight);
            r = intensity(right);
            br = intensity(bottomRight);
            b = intensity(bottom);
            bl = intensity(bottomLeft);
            l = intensity(left);
            
            --滤波 sobel filter
            dX = (tr + 2.0 * r + br) - (tl + 2.0 * l + bl);
            dY = (bl + 2.0 * b + br) - (tl + 2.0 * t + tr);
            dZ = 255 / s;
            
            newCol = normal2Color(vec3(dX,dY,dZ))
            newCol = normal2Color(vec3(dX,dY,dZ):normalize())
            --print(newCol)
            temp:set(x,y,color(newCol.x, newCol.y, newCol.z, 255))
        end
    end
    
    return temp
    
end

-- 从灰度图生成法线图
function greyNormal(img,s)
    local w,h = img.width,img.height
    local temp = image(w,h)
    local sobel = math.sqrt(2.0)
    local sobel = 1.0
    for y =1,img.height do
        for x = 1,img.width do
            -- 取得 me 周围的像素点的 rgba值(灰度值)
            tl  = color(img:get(clamp( x - 1, w), clamp(y + 1, h)))
            t   = color(img:get(clamp( x , w), clamp(y + 1, h)))
            tr  = color(img:get(clamp( x + 1, w), clamp(y + 1, h)))
            r   = color(img:get(clamp( x + 1, w), clamp(y , h)))
            br  = color(img:get(clamp( x + 1, w), clamp(y - 1 , h)))
            b   = color(img:get(clamp( x , w), clamp(y - 1 , h)))
            bl  = color(img:get(clamp( x - 1, w), clamp(y - 1 , h)))
            l   = color(img:get(clamp( x - 1, w), clamp(y , h)))
            me  = color(img:get(clamp( x , w), clamp(y , h)))
                        
            --滤波 sobel filter
            dX = (tr.r + sobel * r.r + br.r) - (tl.r + sobel * l.r + bl.r)
            dY = (bl.r + sobel * b.r + br.r) - (tl.r + sobel * t.r + tr.r)
            dZ = 255 / s
            
            newCol = normal2Color(vec3(dX,dY,dZ):normalize())
            --print(newCol)
            temp:set(x,y,color(newCol.x, newCol.y, newCol.z, 255))
        end
    end
    return temp
end

-- 灰度图生成函数
function genGreyMap(img, s)
    local t = image(img.width, img.height)
    for y =1,img.height do
        for x = 1,img.width do
            local r,g,b,a = img:get(x,y)
            local g = (0.3*r+0.59*g+0.11*b)*s
            t:set(x,y,color(g,g,g,255))
        end
    end
    return t
end

-- 各种贴图效果 shader 
shaders = {
--normal mapping
NormalMapping = { vs=[[
//--------vertex shader---------
attribute vec4 position;
attribute vec4 color;
attribute vec2 texCoord;

varying vec2 vTexCoord;
varying vec4 vColor;

uniform mat4 modelViewProjection;

void main()
{
vColor = color;
vTexCoord = texCoord;
gl_Position = modelViewProjection * position;
}
]],
fs=[[
//---------Fragment shader------------
//Default precision qualifier
precision highp float;

varying vec2 vTexCoord;
varying vec4 vColor;

// 纹理贴图
uniform sampler2D tex;
// 对应的法向图
uniform lowp sampler2D s_multitex;

uniform vec2 Resolution;
uniform vec3 LightPos;
uniform vec4 LightColor;
uniform vec4 AmbientColor;
uniform vec3 Falloff;

void main()
{
//vec4 DiffuseColor = texture2D(tex,vTexCoord);
//vec3 NormalMap = texture2D(s_multitex,vTexCoord).rgb;
vec4 DiffuseColor = texture2D(tex,vec2(mod(vTexCoord.x,1.0), mod(vTexCoord.y,1.0)));
vec3 NormalMap = texture2D(s_multitex,vec2(mod(vTexCoord.x,1.0), mod(vTexCoord.y,1.0))).rgb;
//NormalMap.g = 1.0 - NormalMap.g;
vec3 LightDir = vec3(LightPos.xy-(vTexCoord.xy/Resolution.xy),LightPos.z);
LightDir.x *= Resolution.x/Resolution.y;
float D = length(LightDir);
vec3 N = normalize(NormalMap*2.0-1.0);
vec3 L = normalize(LightDir);
vec3 Diffuse = (LightColor.rgb * LightColor.a) * max(dot(N,L), 0.0);
vec3 Ambient = AmbientColor.rgb * AmbientColor.a;
float Attenuation = 1.0 / (Falloff.x + (Falloff.y*D) + (Falloff.z*D*D));
// 亮度 = 环境光 + 散射 * 衰减
vec3 Intensity = Ambient + Diffuse * Attenuation;
vec3 FinalColor = DiffuseColor.rgb * Intensity;
gl_FragColor = vColor * vec4(FinalColor,DiffuseColor.a);
}
]]},

-- 旧的用来生成法向图的 shader
genNormal = {
vs = [[
attribute vec4 position;
attribute vec4 color;
attribute vec2 texCoord;

varying vec2 vTexCoord;
varying vec4 vColor;
varying vec4 vPosition;

uniform mat4 modelViewProjection;

void main()
{
vColor = color;
vTexCoord = texCoord;
vPosition = position;
gl_Position = modelViewProjection * position;
}
]],
fs = [[
precision highp float;

varying vec2 vTexCoord;
varying vec4 vColor;
varying vec4 vPosition;

uniform sampler2D texture;

// 纹理贴图
uniform sampler2D tex;
void main()
{
//Sample the texture at the interpolated coordinate
lowp vec4 col = texture2D( texture, vTexCoord );

// vec4 normal = normalize(col.rgba);
//彩色法线效果. 法向图
// gl_FragColor = vec4(fmod( (normal.xyz+1.)/2.,1.0), 1.);

// 先求像素点的灰度值
float grey = 0.2126*col.r + 0.7152* col.g + 0.0722*col.b;
//把范围为 [0, 1.0] 的颜色值变换为范围为 [-1.0, 1.0] 的法线值

vec3 pos3D = vec3(vPosition.x, vPosition.y, grey);
vec3 greyCol = vec3(grey,grey,grey);

// 把灰度值作为 z 轴坐标, 组合出立体空间的 vec3 坐标
//vec3 normal = normalize(vec3(vPosition.x*2.-1., vPosition.y*2.-1., grey*2.-1.));
vec3 normal = normalize(vec3(vPosition.x/1000., vPosition.y/1000., grey*2.-1.));

// 直接使用灰度图
gl_FragColor = vec4(greyCol, col.a);

gl_FragColor = vec4((normal.xyz+1.)/2., col.a);

//Set the output color to the texture color
// gl_FragColor = col;
}
]]
},

-- 用 sobel 算子生成法线图    generate normal map with sobel operator
genNormal1 = {
vs = [[
attribute vec4 position;
attribute vec4 color;
attribute vec2 texCoord;

varying vec2 vTexCoord;
varying vec4 vColor;
varying vec4 vPosition;

uniform mat4 modelViewProjection;

void main()
{
vColor = color;
vTexCoord = texCoord;
vPosition = position;
gl_Position = modelViewProjection * position;
}
]],
fs = [[
precision highp float;

varying vec2 vTexCoord;
varying vec4 vColor;
varying vec4 vPosition;

// 纹理贴图
uniform sampler2D tex;
uniform sampler2D texture;

//图像横向长度-宽度, 图像纵向长度-高度
uniform float w;
uniform float h;

float clamp1(float, float);
float intensity(vec4);

float clamp1(float pX, float pMax) {
    if (pX > pMax) 
        return pMax;
    else if (pX < 0.0)
        return 0.0;
    else
        return pX;   
}

float intensity(vec4 col) {
    // 计算像素点的灰度值
    return 0.3*col.x + 0.59*col.y + 0.11*col.z;
}

void main() {
// 横向步长-每像素点宽度,纵向步长-每像素点高度
float ws = 1.0/w ;
float hs = 1.0/h ;
float c[10];
vec2 p = vTexCoord;
lowp vec4 col = texture2D( texture, p );

// sobel operator
// position.      Gx.            Gy
// 1 2 3     |-1. 0. 1.|   |-1. -2. -1.|
// 4 5 6     |-2. 0. 2.|   | 0.  0.  0.|
// 7 8 9     |-1. 0. 1.|   | 1.  2.  1.|
// 右上角,右,右下角
c[3] = intensity(texture2D( texture, vec2(clamp(p.x+ws,0.,w), clamp(p.y+hs,0.,h) )));
c[6] = intensity(texture2D( texture, vec2(clamp1(p.x+ws,w), clamp1(p.y,h))));
c[9] = intensity(texture2D( texture, vec2(clamp1(p.x+ws,w), clamp1(p.y-hs,h))));

// 上, 下
c[2] = intensity(texture2D( texture, vec2(clamp1(p.x,w), clamp1(p.y+hs,h))));
c[8] = intensity(texture2D( texture, vec2(clamp1(p.x,w), clamp1(p.y-hs,h))));

// 左上角, 左, 左下角
c[1] = intensity(texture2D( texture, vec2(clamp1(p.x-ws,w), clamp1(p.y+hs,h))));
c[4] = intensity(texture2D( texture, vec2(clamp1(p.x-ws,w), clamp1(p.y,h)))); 
c[7] = intensity(texture2D( texture, vec2(clamp1(p.x-ws,w), clamp1(p.y-hs,h))));

// 先进行 sobel 滤波, 再把范围从 [-1,1] 调整到 [0,1]
float dx = (c[3]+2.*c[6]+c[9]-(c[1]+2.*c[4]+c[7]) + 1.0) / 2.0;
float dy = (c[7]+2.*c[8]+c[9]-(c[1]+2.*c[2]+c[3]) + 1.0) / 2.0;
float dz = (1.0 + 1.0) / 2.0;

gl_FragColor = vec4(vec3(dx,dy,dz), col.a);

}
]]
}
}

Xcode 项目链接(等有空了再输出, 先占个位)

更新补充

上面的代码 dx 搞错方向了, 应该修改为:

float dx = (-(c[3]+2.*c[6]+c[9])+(c[1]+2.*c[4]+c[7]) + 1.0) / 2.0;

这样才会保持右侧边缘为紫色

正确的生成图:

995377-20160802114553793-818978140.png

错用梯度矩阵后的生成图:

995377-20160802114616965-1111959590.png

用图像处理软件生成的:

995377-20160802114641200-1555017999.png

参考

example-of-normal-mapping
ShaderLesson6
can-normal-maps-be-generated-from-a-texture

转载于:https://www.cnblogs.com/freeblues/p/5697213.html

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
提供的源码资源涵盖了安卓应用、小程序、Python应用和Java应用等多个领域,每个领域都包含了丰富的实例和项目。这些源码都是基于各自平台的最新技术和标准编写,确保了在对应环境下能够无缝运行。同时,源码中配备了详细的注释和文档,帮助用户快速理解代码结构和实现逻辑。 适用人群: 这些源码资源特别适合大学生群体。无论你是计算机相关专业的学生,还是对其他领域编程感兴趣的学生,这些资源都能为你提供宝贵的学习和实践机会。通过学习和运行这些源码,你可以掌握各平台开发的基础知识,提升编程能力和项目实战经验。 使用场景及目标: 在学习阶段,你可以利用这些源码资源进行课程实践、课外项目或毕业设计。通过分析和运行源码,你将深入了解各平台开发的技术细节和最佳实践,逐步培养起自己的项目开发和问题解决能力。此外,在求职或创业过程中,具备跨平台开发能力的大学生将更具竞争力。 其他说明: 为了确保源码资源的可运行性和易用性,特别注意了以下几点:首先,每份源码都提供了详细的运行环境和依赖说明,确保用户能够轻松搭建起开发环境;其次,源码中的注释和文档都非常完善,方便用户快速上手和理解代码;最后,我会定期更新这些源码资源,以适应各平台技术的最新发展和市场需求。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值