陈健沛1，朱炜湛2，蔡志岗1
（1.中山大学光电材料与技术国家重点实验室，广东广州510275；2.广州本致科技有限公司，广东广州510663）摘要：主动式红外摄像机在夜视监控视频中极易出现红眼效应，在图像中留下明显的亮圆斑。针对此缺陷，提出一种自动红眼检测与消除算法。首先对红外夜视监控图像进行边缘检测和形态学闭运算，形成连通域；然后通过分析亮圆斑的几何特征提出三个限制条件，筛选出红眼所在的连通域，输出红眼掩膜；最后对红眼区域用灰度替换和平滑滤波方法进行消除处理。该方法无需人脸检测，无需利用色彩信息，实验结果表明，红眼消除效果良好，速度快，为红外灰度图像优化提供了有效的方法。
教育期刊网 http://www.jyqkw.com
关键词 ：红眼效应；红外监控摄像机；红眼定位；红眼消除
中图分类号：TN929.1?34；TP391.4 文献标识码：A 文章编号：1004?373X（2015）17?0065?03
0 引言
随着社会对安防的重视，视频监控技术特别是红外夜视监控得到了空前应用。国内外在夜视监控技术领域，普遍使用的是低照度摄像机加红外补光照明技术，但是由于红眼效应，瞳孔位置会在监控图像上形成一个明亮的圆斑，破坏图像的真实性。为了解决此缺陷，本文从红眼检测和红眼消除两方面进行研究，以提高红外夜视监控质量。
从1989年Hutchinson发现近红外光源摄像的红眼效应开始[1]，红眼检测发展迅速，日渐成熟。张昌明，Rizon，Yoo，Chen等大多数研究员都在人脸特征检测的基础上，缩小范围再定位红眼[2?5]。Gaubatz和Ali研究团队结合颜色和强度变化创建检测掩膜实现红眼检测，得到了很好的监测效果[6?7]，由于红外监控是灰度图像，没有颜色信息，此方法并不适用。陈春波和Morimoto等人利用近轴光照射瞳孔的亮状态和远轴光照射瞳孔的暗状态对两张图像进行差分处理[8?9]，很好地提取出人眼位置，但该方法需要复杂的设备，并不适合室外夜视监控。
Zhao 和王基帆在室内理想条件下拍摄红眼图片，使用数理形态学的开运算或者Quoit滤波处理红外图像并与原图像进行差分，从而实现瞳孔定位，具有很好的参考价值[10?11]。
柯达公司的Dobbs和Goodwin最早提出采用图像处理方法进行红眼消除[12]，之后DeLuca，Steinberg 等人申请了大量消除红眼效应的专利，Schettini，赵全友，路明等国内外研究人员都致力于研究自动红眼消除算法[13?17]，并取得了一定效果，但这些方法都是基于RBG或者YUV 颜色空间的，并不能直接应用于红外监控图像。
由于受到室外夜视环境和成像系统本身等多种因素的影响，主动式红外监控图像无色彩信息，人脸检测难度大，前人研究方法都无法直接应用，所以本文针对红外夜视监控图像的特点提出具有可靠性的红眼检测和红眼消除新方法。
1 红眼检测
一般情况下，为了保证室外监控范围，监控图像中的人物都比较小，加之黑暗条件下，摄像系统为取得合适亮度而提高感光度引起图像噪声，导致人物图像模糊，人脸特征不明显，无法检测人脸。但是红眼效应所产生的明亮小圆斑，其“亮”、“圆”特征非常明显，通过图1所示的流程，基本上可以剔除复杂的背景干扰，准确得到红眼位置的掩膜。
（1）对输入的红外监控图像采用Canny 算子进行边缘检测。Canny算法在检测前会进行高斯滤波，有效地抑制噪声；使用4个mask 检测水平、垂直以及对角线方向的边缘，没有方向性，对圆形的检测最有效果，能够精确检测出红眼效应的边缘。
（2）将边缘图像进行形态学闭操作，即先膨胀后腐蚀操作，形成封闭的连通域。
（3）对所有的连通域进行条件筛选，通过分析红眼亮斑特征，其判定内容分别为：连通域的长短轴之比、连通域面积、连通域平均灰度值。
根据连通域的形状，可以计算得到与该区域具有相同标准二阶中心矩的椭圆的长轴a 和短轴b（像素意义下），对于标准的圆形来说，长短轴之比K = a b =1，虽然红眼效果在图像上产生一个圆斑，但是由于环境影响，K 值在[1，2]之间都是可能出现的。
红外夜视图像的红眼效应产生的圆斑是有一定面积的，对连通域的面积进行限制，可以抑制环境背景中出现圆形物体的干扰，更重要的是可以剔除高亮噪点。其面积大小A 应该根据监控范围以及摄像机像素大小确定，一般情况下A 值在[10，100]之间。
边缘检测会提取出所有明显的边界，包括光亮和灰暗的边界，所以需要通过连通域的平均灰度值S 大小剔除暗圆斑连通域，调查发现图像亮度适中情况下，红眼效应的圆斑平均灰度值S 普遍大于150。
以上三个判定条件虽然都比较粗糙，但是各自独立，结合在一起可以严格筛选出红眼亮斑。算法采用的门限为1 ? K ? 2,10 ? A ? 100,S ? 150，符合条件的连通域即为红眼所在位置，输出为红眼掩膜，为下一步的红眼消除提供依据。
2 红眼消除
国内外研究人员多数致力于彩色图像的红眼消除，主要用G，B颜色信息对红眼位置的R分量进行矫正，几乎没有涉及到灰度图像的红眼消除，但是夜视红外监控图像的红眼效应非常明显，给观测者带来不舒服的视感刺激，所以解决此问题对提高监控质量还是很有必要的。在夜视红外监控中，红眼效应已经完全破坏了眼睛位置的真实信息，本文只能凭借人们的观察习惯，用人脸的灰度值作为参考，对红眼进行矫正消除。
首先对红眼掩膜用3 × 3 大小的正方形为结构元素进行膨胀操作，提选出红眼周围宽为3个像素的圆环，作为矫正参考区域。该区域避开眼睛，但在人脸范围内，如图2所示。然后计算矫正参考区域的灰度平均值V，并将红眼区域的像素灰度值修改为V 2 。这样眼睛位置要比人脸稍暗一点，但是修正后的红眼边界过渡不自然，通过高斯平滑处理使边界模糊达到目的。平滑范围包括修正后的眼睛和作为矫正参考的区域，使用如下3 × 3 高斯算子：
3 实验结果
实验在室外树林环境下进行，截取其中一张夜视红外监控图像进行处理分析。图3（a）是直接从摄像机输出的原始监控图像，人脸模糊，环境复杂，但是红眼效应产生的明亮圆斑非常明显。经过Canny 算子边缘检测和闭运算后，图3（b）中显示了树叶复杂轮廓对红眼检测带来一定的干扰。但是对连通域进行1 ? K ? 2,10 ? A ? 100,S ? 150 三个条件筛选限定后，只留下了红眼连通域，形成红眼掩膜，如图3（c）所示。图3（d）是将该红眼掩膜在原图中标记出来，可见定位非常准确，为红眼消除提供了准确依据。通过本文提出的红眼消除算法处理后，得到图3（e）结果，通过放大图可以看出消除效果是理想的，过渡平滑，红眼不再突出。不过由于左边的人佩戴眼镜造成反光，带来一定的影响。
另外，对一段视频共150 帧图片进行实验，94%的红眼能够检测出并被修正，达到了很好的效果。但也有8%的图片出现了误检，将图片中类似于红眼效应的亮斑进行了错误的修正。
4 结语
针对红外夜视监控图像出现的红眼效应，本文在前人的研究基础上提出一种新颖的红眼检测及消除算法。该算法无需利用颜色信息，也不用对人脸进行检测，针对红外监控图像直接判断出红眼所在位置，避免了人脸检测带来的误判，同时也大大减少了对人脸检测所耗费的时间，为实时检测提供了有力工具。而且红眼消除算法简单，消除后具有良好的视觉效果，实用性强。不过该算法会将图像中任何与红眼效应相似的明亮圆斑消除掉，这是需要继续改进的地方。
教育期刊网 http://www.jyqkw.com
参考文献
[1] HUTCHINSON T E，WHITE K P，MARTIN W N，et al. Hu?man?computer interaction using eye?gaze input [J]. IEEE Tran?sactions on Systems，Man and Cybernetics，1989，19（6）：1527?1534.
[2] 张昌明，童卫青，王燕群.一种高性能近红外光人脸检测和眼睛定位算法[J].计算机系统应用，2011，20（4）：96?101.
[3] RIZON M，KAWAGUCHI T. Automatic eye detection using in?tensity and edge information [C]// Proceedings of 2000 IEEE In?ternational Conference on TENCON. [S.l.]：IEEE，2000，2：415?420.
[4] YOO S，PARK R H. Red?eye detection and correction using inpainting in digital photographs [J]. IEEE Transactions on Con?sumer Electronics，2009，55（3）：1006?1014.
[5] CHEN Yongsheng，SU Chanhung，CHEN Jiunhung，et al. Vi?deo?based real time eye tracking technique for auto stereoscopicdisplays [C]// Proceedings of 2000 the 5th IEEE InternationalConference on Artificial Intelligence and Applications. Taibei，China：IEEE，2000：188?193.
[6] GAUBATZ M，ULICHNEY R. Automatic red ? eye detectionand correction [C]// Proceedings of 2002 IEEE InternationalConference on Image Processing. [S.l.]：IEEE，2002，1：804?807.
[7] ALI T，KHATTAK S，KIM I. Automatic red?eye effect removalusing combined intensity and color information [J]. Journal ofImaging Science，2011，59（1）：8?16.
[8] 陈春波，王元庆.基于红眼效应的人眼探测[J].计算机工程与应用，2007，43（9）：198?200.
[9] MORIMOTO C H，KOONS D，AMIR A，et al. Pupil detectionand tracking using multiple light sources [J]. Image and VisionComputing，2000，18（4）：331?335.
[10] ZHAO S Y，GRIGAT R R. An automatic face recognition sys?tem in the near infrared spectrum [C]// Proceedings of 2005the 4th International Conference on Machine Learning and Da?ta Mining in Pattern Recognition. Leipzig：Springer，2005：437?444.
[11] 王基帆，童卫青.基于数理形态学的近红外光图像实时人脸检测[J].华东师范大学学报：自然科学版，2010（3）：39?47.
[12] DOBBS C M，GOODWIN R M. Localized image recoloring usingellipsoid boundary function：US，5130789 A [P]. 1992?07?14.[13] DELUCA M J. Red ? eye filter method and apparatus：US，8264575 B1 [P]. 2012?09?11.
[14] STEINBER E，PRILUTSKY Y，CORCORAN P，et al. Red?eye filter method and apparatus：US，8493466 B2 [P]. 2013?07?23.
[15] SCHETTINI R，GASPARINI F，CHAZLI F. A modular proce?dure for automatic red eye correction in digital photos [C]//Proceedings of 2004 SPIE Conference On Color Imaging IX：Processing，Hardcopy，and Applications. [S.l.]：SPIE，2004：139?147.
[16] 赵全友，潘保昌，郑胜林，等.一种自动红眼检测与消除算法倡[J].计算机应用研究，2009，26（2）：763?765.
[17] 路明，赵群飞，施鹏飞.一种自动红眼消除方法[J].电路与系统学报，2006，11（6）：124?128.