花了一晚上的时间终于看懂Image Effect中的Blur，其实很简单，就是一下子没有理解到。
原理：使用两个一维[1*7]的高斯滤波模板，一个用在x方向，另一个用在y方向。高斯滤波有模糊的效果。
js脚本参数：
Down Sample：OnRenderImage中获取的图像进行降采样，其实就是把要处理的纹理变小。有利于加快shader运行速度。
Blur Size：在使用高斯模板时，相邻像素点的间隔。越大间隔越远，图像越模糊。但过大的值会导致失真。
Blur Iterations：迭代次数，越大模糊效果越好，但消耗越大。
Blur Type：两个不同的shader，后一个是前一个的优化版本，但差别不大。
具体代码分析：
function OnRenderImage (source : RenderTexture, destination : RenderTexture) {
if(CheckResources() == false) {
Graphics.Blit (source, destination);
return;
}
var widthMod : float = 1.0f / (1.0f * (1<<downsample)); // 降采样系数的倒数，用于调整降采样后，相邻像素的间隔
// blurMaterial.SetVector ("_Parameter", Vector4 (blurSize * widthMod, -blurSize * widthMod, 0.0f, 0.0f));
source.filterMode = FilterMode.Bilinear;
var rtW : int = source.width >> downsample; // >> 是除法的优化
var rtH : int = source.height >> downsample;
// downsample
var rt : RenderTexture = RenderTexture.GetTemporary (rtW, rtH, 0, source.format);
rt.filterMode = FilterMode.Bilinear; // 对应的shader的Pass 0
Graphics.Blit (source, rt, blurMaterial, 0); //首先对图像进行降采样，同时进行简单的模糊
var passOffs = blurType == BlurType.StandardGauss ? 0 : 2; // 选择不同的blurtype，就调用不同的shader pass
for(var i : int = 0; i < blurIterations; i++) {
var iterationOffs : float = (i*1.0f); // _Parameter.x 记录的是 相邻像素的间隔，随着迭代次数增大
blurMaterial.SetVector ("_Parameter",
Vector4 (blurSize * widthMod + iterationOffs, -blurSize * widthMod - iterationOffs, 0.0f, 0.0f));
// vertical blur 垂直滤波
var rt2 : RenderTexture = RenderTexture.GetTemporary (rtW, rtH, 0, source.format);
rt2.filterMode = FilterMode.Bilinear;
Graphics.Blit (rt, rt2, blurMaterial, 1 + passOffs); // 对应着shader的pass 1，2
RenderTexture.ReleaseTemporary (rt);
rt = rt2;
// horizontal blur 水平滤波
rt2 = RenderTexture.GetTemporary (rtW, rtH, 0, source.format);
rt2.filterMode = FilterMode.Bilinear;
Graphics.Blit (rt, rt2, blurMaterial, 2 + passOffs); // 对应着shader的pass 3，4
RenderTexture.ReleaseTemporary (rt);
rt = rt2;
}
Graphics.Blit (rt, destination);
RenderTexture.ReleaseTemporary (rt);
}
接着分析shader文件：
先看5个pass，分别是用在上文cs脚本中的Bilt函数中。
SubShader {
ZTest Off Cull Off ZWrite Off Blend Off
Fog { Mode off }
// 0
Pass {
CGPROGRAM
#pragma vertex vert4Tap
#pragma fragment fragDownsample
#pragma fragmentoption ARB_precision_hint_fastest
ENDCG
}
// 1
Pass {
ZTest Always
Cull Off
CGPROGRAM
#pragma vertex vertBlurVertical
#pragma fragment fragBlur8
#pragma fragmentoption ARB_precision_hint_fastest
ENDCG
}
// 2
Pass {
ZTest Always
Cull Off
CGPROGRAM
#pragma vertex vertBlurHorizontal
#pragma fragment fragBlur8
#pragma fragmentoption ARB_precision_hint_fastest
ENDCG
}
// alternate blur
// 3
Pass {
ZTest Always
Cull Off
CGPROGRAM
#pragma vertex vertBlurVerticalSGX
#pragma fragment fragBlurSGX
#pragma fragmentoption ARB_precision_hint_fastest
ENDCG
}
// 4
Pass {
ZTest Always
Cull Off
CGPROGRAM
#pragma vertex vertBlurHorizontalSGX
#pragma fragment fragBlurSGX
#pragma fragmentoption ARB_precision_hint_fastest
ENDCG
}
}
pass 0：在降采样的同时，进行简单地模糊处理。
v2f_tap vert4Tap ( appdata_img v )
{
v2f_tap o;
o.pos = mul (UNITY_MATRIX_MVP, v.vertex); // 取像素周围的点
o.uv20 = v.texcoord + _MainTex_TexelSize.xy;
o.uv21 = v.texcoord + _MainTex_TexelSize.xy * half2(-0.5h,-0.5h);
o.uv22 = v.texcoord + _MainTex_TexelSize.xy * half2(0.5h,-0.5h);
o.uv23 = v.texcoord + _MainTex_TexelSize.xy * half2(-0.5h,0.5h);
return o;
}
fixed4 fragDownsample ( v2f_tap i ) : SV_Target
{
fixed4 color = tex2D (_MainTex, i.uv20);
color += tex2D (_MainTex, i.uv21);
color += tex2D (_MainTex, i.uv22);
color += tex2D (_MainTex, i.uv23);
return color / 4;
}
接下来的pass 1，2 和pass 3， 4，都是分别在x y两个方向进行高斯滤波。
先看看高斯滤波模板：
static const half4 curve4[7] = { half4(0.0205,0.0205,0.0205,0), half4(0.0855,0.0855,0.0855,0), half4(0.232,0.232,0.232,0),
half4(0.324,0.324,0.324,1), half4(0.232,0.232,0.232,0), half4(0.0855,0.0855,0.0855,0), half4(0.0205,0.0205,0.0205,0) };
这是 [1*7]的模板，对中间点像素的左右两边各3个像素，总共7个像素进行加权求和，得到新的像素值。
pass 1，2的只有vert函数不一样，分别是取水平和垂直方向的偏差值。
v2f_withBlurCoords8 vertBlurHorizontal (appdata_img v)
{
v2f_withBlurCoords8 o;
o.pos = mul (UNITY_MATRIX_MVP, v.vertex);
o.uv = half4(v.texcoord.xy,1,1);
o.offs = _MainTex_TexelSize.xy * half2(1.0, 0.0) * _Parameter.x; // 水平方向的偏差值
return o;
}
v2f_withBlurCoords8 vertBlurVertical (appdata_img v)
{
v2f_withBlurCoords8 o;
o.pos = mul (UNITY_MATRIX_MVP, v.vertex);
o.uv = half4(v.texcoord.xy,1,1);
o.offs = _MainTex_TexelSize.xy * half2(0.0, 1.0) * _Parameter.x; // 垂直方向的偏差值
return o;
}
half4 fragBlur8 ( v2f_withBlurCoords8 i ) : SV_Target
{
half2 uv = i.uv.xy;
half2 netFilterWidth = i.offs;
half2 coords = uv - netFilterWidth * 3.0; // 这里从中心点偏移3个间隔，从最左边或者是最上边开始进行加权累加
half4 color = 0;
for( int l = 0; l < 7; l++ )
{
half4 tap = tex2D(_MainTex, coords);
color += tap * curve4[l]; // 像素值乘上对应的权值
coords += netFilterWidth; // 移到下一个像素
}
return color;
}
在pass 1，2中的uv值都是float2向量，然而寄存器可以一次性储存float4，即可以一个float4值存储两个uv值。并且像素着色器函数中，计算相邻像素的步骤，可以放在顶点着色器中。于是就有下面这个版本：
v2f_withBlurCoordsSGX vertBlurHorizontalSGX (appdata_img v)
{
v2f_withBlurCoordsSGX o;
o.pos = mul (UNITY_MATRIX_MVP, v.vertex);
o.uv = v.texcoord.xy;
half2 netFilterWidth = _MainTex_TexelSize.xy * half2(1.0, 0.0) * _Parameter.x;
half4 coords = -netFilterWidth.xyxy * 3.0;
// 计算左右相邻各3个像素的坐标
o.offs[0] = v.texcoord.xyxy + coords * half4(1.0h,1.0h,-1.0h,-1.0h);
coords += netFilterWidth.xyxy;
o.offs[1] = v.texcoord.xyxy + coords * half4(1.0h,1.0h,-1.0h,-1.0h);
coords += netFilterWidth.xyxy;
o.offs[2] = v.texcoord.xyxy + coords * half4(1.0h,1.0h,-1.0h,-1.0h);
return o;
}
v2f_withBlurCoordsSGX vertBlurVerticalSGX (appdata_img v)
{
v2f_withBlurCoordsSGX o;
o.pos = mul (UNITY_MATRIX_MVP, v.vertex);
o.uv = half4(v.texcoord.xy,1,1);
half2 netFilterWidth = _MainTex_TexelSize.xy * half2(0.0, 1.0) * _Parameter.x;
half4 coords = -netFilterWidth.xyxy * 3.0;
// 计算上下相邻各3个像素的坐标
o.offs[0] = v.texcoord.xyxy + coords * half4(1.0h,1.0h,-1.0h,-1.0h);
coords += netFilterWidth.xyxy;
o.offs[1] = v.texcoord.xyxy + coords * half4(1.0h,1.0h,-1.0h,-1.0h);
coords += netFilterWidth.xyxy;
o.offs[2] = v.texcoord.xyxy + coords * half4(1.0h,1.0h,-1.0h,-1.0h);
return o;
}
half4 fragBlurSGX ( v2f_withBlurCoordsSGX i ) : SV_Target
{
half2 uv = i.uv.xy;
half4 color = tex2D(_MainTex, i.uv) * curve4[3]; // 中间像素，乘上对应的权值
for( int l = 0; l < 3; l++ )
{
half4 tapA = tex2D(_MainTex, i.offs[l].xy);
half4 tapB = tex2D(_MainTex, i.offs[l].zw);
color += (tapA + tapB) * curve4[l]; // 由于模板是对称的，可以使用相同的权值
}
return color;
}
结论：
通过调试，发现使用downsampler为1，iteration为2时，调整blursize可以得到较好的效果，并且性能较好。但blursize为0时，还是模糊图像，想做成那种从清晰到模糊的动画，估计还要调整一下代码。
时间： 2024-11-05 11:26:37