UnityShader实例15:屏幕特效之Bloom

Bloom特效

概述

Bloom,又称“全屏泛光”，是游戏中常用的一种镜头效果，是一种比较廉价的“伪HDR”效果（如下右图）；使用了Bloom效果后，画面的对比会得到增强，亮的地方曝光也会得到加强，画面也会呈现一种朦胧，梦幻的效果，婚纱摄影中照片处理经常用到这种类似处理效果。Bloom效果一般用来近似模拟HDR效果，效果也比较相向，但实现原理却完全不同。本例将实现一个适合移动平台使用的bloom屏幕特效。

Bloom特效与HDR特效的异同

要比较两者的异同，得先搞清楚HDR特效是什么；HDR，本身是High-Dynamic Range（高动态范围）的缩写，这本来是一个CG概念。HDR的含义，简单说，就是超越普通的光照的颜色和强度的光照。计算机在表示图象的时候是用8bit(256)级或16bit(65536)级来区分图象的亮度的，但这区区几百或几万无法再现真实自然的光照情况。因此普通情况下，无法同时显示亮部和暗部的所有细节。
现实中，当人由黑暗地方走到光亮地方，眼睛会自动眯起来。人在黑暗的地方，为了看清楚对象，瞳孔会很大张开，以吸收更多光线。当突然走到光亮地方，瞳孔来不及收缩，所以唯有眯上眼睛，保护视网膜上的视神经。而电脑是死物，唯有靠HDR技术模拟这效果——人眼自动适应光线变化的能力。方法是快速将光线渲染得非常光亮，然后将亮度逐渐降低。而HDR的最终效果是亮处的效果是鲜亮，而黑暗处的效果是能分辨物体的轮廓和深度，而不是以往的一团黑。。
想要实现HDR特效，首先，游戏开发者要在游戏开发过程中，利用开发工具（就是游戏引擎）将实际场景用HDRI记录下来，当然开发技术强的开发组会直接用小开发工具（比如3D MAX的某些特效插件）创造HDRI图像；其次，我们的显卡必须支持显示HDR特效，nVIDIA的显卡必须是GeForce
6系列或更高，ATI显卡至少是Radeon 9550或以上。



那么HDR与bloom效果的差别到底在什么地方呢？

　　第一，HDR效果就是超亮的光照与超暗的黑暗的某种结合，这个效果是光照产生的，强度、颜色等方面是游戏程序可动态控制的，是一种即时动态光影；bloom效果则是物体本身发出的光照，仅仅是将光照范围调高到过饱和，是游戏程序无法动态控制的，是一种全屏泛光。

　　第二，bloom效果无需HDR就可以实现，但是bloom效果是很受限的，它只支持8位RGBA，而HDR最高支持到32位RGBA。

　　第三，bloom效果的实现很简单，比如《半条命2》的MOD就是一个很小的很简单的MOD，而且bloom效果不受显卡的规格的限制，你甚至可以在TNT显卡上实现bloom效果（当然效果很差）！而HDR，必须是6XXX以上的显卡才能够实现，这里的HDR是指nVIDIA的HDR。这时有必要谈nVIDIA和ATI的显卡所实现的HDR，两者还是有区别的，具体区别就很专业了，总之从真实性表现来看，nVIDIA的显卡实现的HDR更好一些。HDR是nVIDIA提出的概念，从技术上来讲，ATI当然无法严格克隆nVIDIA的技术，所以ATI的HDR是另一种途径实现的尽可能接近的HDR，不能算“真”HDR，据传ATI的R520能够真正实现FP16
HDR。





未使用HDR图像 使用HDR图像

Bloom特效的实现流程

Bloom效果实现的流程与HDR的物理还原不同，它只是一种简单的近似模拟：

第一步： 先获取屏幕图像，然后对每个像素进行亮度检测，若大于某个阀值即保留原始颜色值，否则置为黑色；
第二步：对上一步获取的图像，做一个模糊，通常使用高斯模糊。
第三步：将模糊后的图片和原图片做一个加权和。

通过这三步就可以达到一个全屏泛光的效果。

Bloom特效的shader实现

本例在shader中实现大致和上面所述流程类似，只是在第一步做了少许改动，在这里我们将亮部的像素进行了扩展，关键代码如下：

struct v2f_withMaxCoords {
half4 pos : SV_POSITION;
half2 uv2[5] : TEXCOORD0;
};

//在vert函数里对uv坐标做了四次偏移，对原像素周围临近的像素采样
v2f_withMaxCoords vertMax (appdata_img v)
{
v2f_withMaxCoords o;
o.pos = mul (UNITY_MATRIX_MVP, v.vertex);
o.uv2[0] = v.texcoord + _MainTex_TexelSize.xy * half2(1.5,1.5);
o.uv2[1] = v.texcoord + _MainTex_TexelSize.xy * half2(-1.5,1.5);
o.uv2[2] = v.texcoord + _MainTex_TexelSize.xy * half2(-1.5,-1.5);
o.uv2[3] = v.texcoord + _MainTex_TexelSize.xy * half2(1.5,-1.5);
o.uv2[4] = v.texcoord ;
return o;
}
//Frag函数用偏移的uv坐标采样，并且与原像素进行对比，如果亮度比原像素大，则取代原像素，因此亮部像素得到了扩展处理。这里ONE_MINUS_INTENSITY是由脚本传递过来的参数，用来控制bloom范围，功能就是讲低于这个值的像素设置为黑色。
fixed4 fragMax ( v2f_withMaxCoords i ) : COLOR
{
fixed4 color = tex2D(_MainTex, i.uv2[4]);
color = max(color, tex2D (_MainTex, i.uv2[0]));
color = max(color, tex2D (_MainTex, i.uv2[1]));
color = max(color, tex2D (_MainTex, i.uv2[2]));
color = max(color, tex2D (_MainTex, i.uv2[3]));
return saturate(color - ONE_MINUS_INTENSITY);
}

流程的第二步就是讲上一步的结果做模糊处理，在这里我们使用的上一个例子所使用的高斯模糊，因此不多做解释，关键代码如下面所示：

struct v2f_withBlurCoordsSGX
{
float4 pos : SV_POSITION;
half2 offs[7] : TEXCOORD0;
};

//水平方向的像素偏移，用来做水平模糊
v2f_withBlurCoordsSGX vertBlurHorizontalSGX (appdata_img v)
{
v2f_withBlurCoordsSGX o;
o.pos = mul (UNITY_MATRIX_MVP, v.vertex);
half2 netFilterWidth = _MainTex_TexelSize.xy * half2(1.0, 0.0) * _Parameter.x;

o.offs[0] = v.texcoord + netFilterWidth;
o.offs[1] = v.texcoord + netFilterWidth*2.0;
o.offs[2] = v.texcoord + netFilterWidth*3.0;
o.offs[3] = v.texcoord - netFilterWidth;
o.offs[4] = v.texcoord - netFilterWidth*2.0;
o.offs[5] = v.texcoord - netFilterWidth*3.0;
o.offs[6] = v.texcoord;

return o;
}
//垂直方向的像素偏移，用来做水平模糊

v2f_withBlurCoordsSGX vertBlurVerticalSGX (appdata_img v)
{
v2f_withBlurCoordsSGX o;
o.pos = mul (UNITY_MATRIX_MVP, v.vertex);
half2 netFilterWidth = _MainTex_TexelSize.xy * half2(0.0, 1.0) * _Parameter.x;

o.offs[0] = v.texcoord + netFilterWidth;
o.offs[1] = v.texcoord + netFilterWidth*2.0;
o.offs[2] = v.texcoord + netFilterWidth*3.0;
o.offs[3] = v.texcoord - netFilterWidth;
o.offs[4] = v.texcoord - netFilterWidth*2.0;
o.offs[5] = v.texcoord - netFilterWidth*3.0;
o.offs[6] = v.texcoord;

return o;
}
//用vert传过来的uv坐标数组进行采样，并乘以对应的权重进行叠加，其结果是个近似高斯模糊。
fixed4 fragBlurSGX ( v2f_withBlurCoordsSGX i ) : COLOR
{

fixed4 color = tex2D(_MainTex, i.offs[6]) * curve[3];
color += tex2D(_MainTex, i.offs[0])*curve[2];
color += tex2D(_MainTex, i.offs[1])*curve[1];
color += tex2D(_MainTex, i.offs[2])*curve[0];
color += tex2D(_MainTex, i.offs[3])*curve[2];
color += tex2D(_MainTex, i.offs[4])*curve[1];
color += tex2D(_MainTex, i.offs[5])*curve[0];

return color;

}

流程的最后一步就非常简单了，将上一步获取的结果与原图进行权重求和即可，就能得到一个bloom效果。在这里我们添加了从C#脚本传递过来的权重参数_Parameter.z和颜色参数_ColorMix，用来控制bloom的强度以及颜色倾向。

struct v2f_simple {
half4 pos : SV_POSITION;
half4 uv : TEXCOORD0;
};
//考虑到D3D9的uv坐标Y轴是反转的，因此需要做个判断进行调整，防止图像倒转。
v2f_simple vertBloom (appdata_img v)
{
v2f_simple o;
o.pos = mul (UNITY_MATRIX_MVP, v.vertex);
o.uv = v.texcoord.xyxy;
#if SHADER_API_D3D9
if (_MainTex_TexelSize.y < 0.0)
o.uv.w = 1.0 - o.uv.w;
#endif
return o;
}

fixed4 fragBloom ( v2f_simple i ) : COLOR
{
fixed4 color = tex2D(_MainTex, i.uv.xy);
color += tex2D(_Bloom, i.uv.zw)*_Parameter.z*_ColorMix;
return color;
}

本例Bloom特效的shader部分关键代码就是这么多，这里就不贴出完整代码了，有需要的同学可以到文章末尾点积链接下载，在完整代码里，我们使用了CGINCLUDE和ENDCG模块化的方式组织代码，减少了一定代码量，并且是代码的可读性更好，方便C#脚本调用。

C#脚本

C#脚本相对而言比较简单，和前面的的屏幕特效脚本类似，需要对shader的不同pass分别调用，并且开放了四个参数以方便效果的调节：Color Mix控制bloom特效的颜色倾向，Threshold控制bloom效果的范围，Intensity控制bloom特效的强度，Blur
Size控制模糊范围以及模糊的质量。关键代码如下；完整代码请到文末放出的链接下载。

void OnRenderImage (RenderTexture sourceTexture, RenderTexture destTexture)
{
#if UNITY_EDITOR
FindShaders ();
CheckSupport ();
CreateMaterials ();
#endif

if(threshold != 0 && intensity != 0){

int rtW = sourceTexture.width/4;
int rtH = sourceTexture.height/4;

BloomMaterial.SetColor ("_ColorMix", colorMix);
BloomMaterial.SetVector ("_Parameter", new Vector4(BlurSize*1.5f, 0.0f, intensity,0.8f - threshold));
// material.SetFloat("_blurSize",BlurSize);

RenderTexture rtTempA = RenderTexture.GetTemporary (rtW, rtH, 0,rtFormat);
rtTempA.filterMode = FilterMode.Bilinear;

RenderTexture rtTempB = RenderTexture.GetTemporary (rtW, rtH, 0,rtFormat);
rtTempA.filterMode = FilterMode.Bilinear;

Graphics.Blit (sourceTexture, rtTempA,BloomMaterial,0);

Graphics.Blit (rtTempA, rtTempB, BloomMaterial,1);
RenderTexture.ReleaseTemporary(rtTempA);

rtTempA = RenderTexture.GetTemporary (rtW, rtH, 0, rtFormat);
rtTempB.filterMode = FilterMode.Bilinear;
Graphics.Blit (rtTempB, rtTempA, BloomMaterial,2);

BloomMaterial.SetTexture ("_Bloom", rtTempA);
Graphics.Blit (sourceTexture, destTexture, BloomMaterial,3);

RenderTexture.ReleaseTemporary(rtTempA);
RenderTexture.ReleaseTemporary(rtTempB);
}

else{
Graphics.Blit(sourceTexture, destTexture);

}

}

本例实现的效果如图

总结

本例bloom效果是为移动平台开发，做了不少的优化，使之在移动平台上也有不错的效率，当然本例效果还有进一步的优化空间，比如将第一步的像素扩展去掉，可以节省掉4次多余的采样，第二步的高斯模糊同样也可以降阶，甚至也可以换成均值模糊，也能节省不少的计算。

下载链接：

屏幕特效之Bloom