《视频监控中运动目标检测和阴影消除.docx》由会员分享，可在线阅读，更多相关《视频监控中运动目标检测和阴影消除.docx（7页珍藏版）》请在三一办公上搜索。
1、视频监控中运动目标检测和阴影消除张起贵1 ，杜永峰1，张光伟1（1太原理工大学 信息工程学院，山西 太原 030024）摘要: 由于外界环境的复杂性，视频监控中检测出的运动目标往往轮廓缺损，并伴随阴影和噪声的问题。提出了一种方法用以改善轮廓、消除阴影和噪声。首先利用五帧梯度图像的差分确定运动目标的变化区域，再和背景差分法的结果相或，获取了运动目标的完整轮廓。分析了阴影在颜色空间的特性，用以消除阴影，并根据噪声的分布特性去除噪声。处理结果表明，处理速度为20ms/帧，达到实时性要求,获得的运动目标消除了阴影和噪声，具有较强的鲁棒性。关 键 词：运动目标检测；梯度图像；五帧差分法；背景差分法；阴影
2、消除；去噪中图分类号：TN27;TP391 Shadow elimination and moving Object Detection in the Video Surveillance Zhang Qi-gui1, Du Yong-feng1,Zhang Guang-wei1 (1.Department of Information Engineering,Taiyuan University of Technology,Taiyuan,030024,China)Abstract: Due to the complexity of the external environment ,mov
3、ing target detected in video surveillance tends to possess contour defects, as well as shadow and noise problems.It proposed a method to improve the profile、 eliminate the shadow and noise.Firstly, it used five frame gradient image to determine the changed region of the moving object and then or the
4、 results of background differencing method to obtain a complete outline of the moving target.It analyzed the characteristics of HSV in the color space ,so as to eliminatethe shadow.And in accordance with the distribution characteristics of noise it removed the noise.Processed results show that in th
5、e processing speed of 20ms / frame ,it achieves real-time requirements .The moving target obtained eliminates the shadow and noise, and has strong robustness.Key words: moving target detection; gradient image; five frame differencing method; the background difference method; shadow elimination; de-n
6、oising1 引 基金项目：国家自然科学基金资助项目 三维CT统计重建算法研究（60772102）作者简介：张起贵 （1963），男，山西太原人，教授,研究生导师，主要研究方向是数字图像处理。 言在视频监控技术中，运动目标的有效检测、提取已成为关键技术，并且是进行目标跟踪识别等后续处理的基础1 。常用的方法有:帧间差分法、背景差分法、光流法。帧间差分法基于时间序列图像上图像的差分来检测运动目标，对光照等外界干扰不敏感，但一般难以获取运动目标的完整轮廓2，对于非整体运动的对象，如非刚体，仅用三帧的信息不能对其少量运动的部分进行有效的分割3，文章采用五帧差分法，以获得较好的效果；背景差分法将前景
7、目标从背景中分离出来，从而获得运动目标的位置、大小、形状等比较完整的信息，但该方法对外界环境变化，如光照、外来事件等较为敏感4。由于视频监控环境的复杂性，获取的图像序列难免受噪声以及其他外来影响，直接使用差分图像难以有效提取运动目标。如果在计算图像梯度信息后，利用图像梯度不受亮度、噪声影响的特点来提取运动目标，则可大大减少这方面的影响。文章将五帧差分法和背景差法相结合获取了比较好的效果。图1 算法基本流程Fig. 1 Flowing chart for algorithm2 基于梯度图像五帧差分和背景差分的运动目标检测新方法2.1 基本思路和流程如图1所示，文章提出算法的特点是基于梯度图像，将
8、五帧差分与背景差分法相结合。预先选取第2帧作为背景差分法中的背景帧，将第3帧与第2帧差分，得到运动目标在第3帧图像中的二值化图像。对输入的5帧图像求梯度，然后将对应的图像帧进行差分，得到运动目标在中间帧（第3帧）的二值化图像。将两种方法获得的二值化结果相或，改善轮廓中的断裂和空洞。最后，进行数学形态学滤波消除噪声点。2.2 背景差分法文章的背景选择了基于上下文的背景模型，即对当前帧图像之前采集到的图像进行处理，取得背景图像。背景需要适时刷新，刷新速度过慢降低了反应灵敏度；刷新速度过快增加了不必要的运算量，根据刷新率来控制背景迷信的刷新。用来表示当前采集的图像上点的灰度值，来表示背景图像上的灰度
9、值，为采集的图像帧序列号。 （1）将背景模型的更新与后面的分割结果相结合，这实际上是用运动目标跟踪的结果来指导更新。经过这种改进可以在保护背景模型不受运动目标影响的同时迅速响应背景的变化5。文章先以第一帧当作背景，等得到第三帧目标图像的分割结果的时候开始与五帧梯度差分法第三帧的目标分割结果想或，以后的图像序列依次进行对应帧的或操作。2.3 梯度图像的生成采用背景差分法提取运动目标的关键在于准确地定位目标和噪声之间的差别,从而准确地提取分割阈值。不同环境条件下，视频序列的图像信/噪比(噪声污染情况)不同,对其帧差图像使用的分割阈值也应不同,基于固定阈值的视频图像分割方法不具备自适应性。由于监控系
10、统所处环境的复杂性,图像采集中必然引入的量化噪声以及可能的摄像头光圈自动调节等因素的影响,直接使用差分图像难以有效地提取出运动目标。如果在提取图像的梯度信息之后,利用图像的梯度不受亮度、量化噪声影响的特点来提取运动目标,则可以大大减少这方面的影响6。利用边缘检测性能较好、计算复杂度较低的Sobel算子7 提取梯度图像: （2） ，。其中，是像素点在t时刻的近似梯度幅值。、分别是水平、垂直方向上的Sobel算子。其中, 为灰度图像;对于彩色图像、分别代表点的RGB颜色分量,可先按照式（3）将其转换为灰度图像. （3）2.4 梯度图像的五帧差法算法描述(1)序列图像处理用来确定图像序列中有无物体运
11、动、解决低信噪比条件下的运动小目标检测问题的较好方法。通过采集设备实时从外界环境里获取运动彩色图像,其颜色种类多,不利于图像处理,因此要把彩色图转换为灰度图,其灰度值和RGB颜色对应关系如下: 。然后求出每一帧灰度图像的梯度。(2)假设在时间间隔内, 成像传感器获取一个m帧序列的梯度图像表示为: 。取连续五帧序列原始梯度图像 。取中间帧，对；分别计算帧间不同位移量的中间帧的运动对象边缘，即将和分别进行三帧差分运算，对得到的二值图像进行或操作，将五帧中相当于中间帧的运动信息都集中在中间帧。(3)对得到的二值图像结果进行后处理,去掉从背景中分割出的孤立噪声。填充目标区域的孤立背景空缺,得到的结果为
12、原始图像的运动目标分割图像。(4)对(a)式表示的下一个连续五帧序列图像重复步骤(2)，(3),可以得到(a)式中的m-2帧序列图像的运动目标分割像。从图2可以看到，本文的目标检测方法在外界环境条件不复杂的情况下，可以正确的检测出运动目标，并且效果好于单一采用背景差分法或单一采用三帧差分法。但是这种方法也有不足之处，在复杂场景中很难检测出的运动目标的阴影，所以后续需要进行阴影消除。（a）原始图像 （b）背景差分法 （c）三帧差分法 （d）本文算法图2 几种常用算法实验效果的比较 Fig. 2 Experimental results and comparison of common algor
13、ithms3 阴影消除和去噪3.1 阴影消除 视频监控中检测运动目标的时候，经常会把目标产生的阴影也包括在前景当中，产生消弱检测质量的问题，如一个运动目标的阴影会和相邻的目标的连接在一起，造成正确分割运动目标个数的困难。对以后的目标区分、跟踪、识别、分类等都造成影响。会使后续步骤变得困难，正确率也会下降很大，所以必须消除阴影。但是阴影的消除有很困难，一是因为阴影跟背景区别很大而被理解为前景，二是阴影依附着运动目标，他们有相同的运动属性。目前，阴影消除的方法很多，在颜色空间中，可以用矢量来表征像素点，并以当前图像中的像素点矢量与对应的背景点矢量相减得到能表征亮度和色彩的彩色模型，然后建立背景模型
14、；在颜色空间中，利用色度、饱和度和亮度三要素可以建立背景模型，对阴影进行检测和识别.在颜色空间中，各分量的定义如下：参数表示色调（），即颜色本色，该参数用角度量表示，从到。(“色调”常常被叫作“色彩”。 颜色是“原色”。)；参数表示饱和度()，它表示所选颜色的纯度和该颜色最大纯度之间的比率；参数表示色彩的明亮程度()。阴影有个特性，当运动目标和阴影同时出现的时候，阴影和运动目标的灰度相对于背景灰度的改变可能差不多，但是色度上阴影几乎相对背景没有改变。算法应用在空间更加符合人的主观认识。所以，可以利用色度信息区除阴影。并且阴影的去除是在坚持运动目标后进行的，只需处理有运动目标的地方，所以运算量很
15、低。采用下面的公式检测运动区域里的阴影。 , ， 。其中，为运动区域的检测结果，阴影点为,非阴影点为。和为时刻背景点的色调分类和饱和度分量；和代表时刻前景点的色调分类和饱和度分量。图3为一个路口监控场景中，对汽车阴影的消除，对低亮度汽车和高亮度汽车的阴影消除的都达到了预期效果。 （a）原始图像 （b）获取的运动目标 （c）运动目标的阴影消除 图3 阴影消除Fig. 2 shadow elimination3.2 运动目标的分割在运动目标识别之后，需要进行分割。我们可以采用经验值作为结果元素参数对运动块进行膨胀，如图4 所示：图中有6个运动块，在水平方向和竖直方向上将每个运动块进行膨胀动块进行膨
16、胀，膨胀参数是由经验决定的一个距离，当竖直方向上若2个运动目标块之间距离，如目标块，则认为它们属于同一运动目标块，将其连通起来。而目标块，之间的距离，则认为它们不是同一运动目标块。图4 运动目标的分割Fig. 4 Segmentation of Moving Object 3.3 噪声处理在消除阴影并进行分割后，我们可以看到运动目标一般都是大块的区域，而噪声基本都是分散在图像中的零散小块，由于噪声的无规律性，运用一般方法去噪的效果不是很理想。但是噪声一般呈高斯分布，噪声能量绝大部分在以均值为中心的三倍方差范围内。运动区域的分布比较分散，能量不集中，但面积有限，对噪声分布的影响很微弱。整个帧差的
17、分布依然呈高斯分布。根据噪声信号分析结果，在存在运动目标的区域，由于物体运动的干扰，使该区域的灰度值的变化幅度加大，所以帧差对应区域的值的方差正大，无运动区域只有噪声，他的方差比运动区域的方差要小的多，图像总体方差会落在两者之间。如果表示图像总体方差，表示噪声区域方差，表示运动区域方差，则有8一般噪声区域与运动区域有着明显的差别，可以采用单一阈值来划分噪声区域和运动区域。由图5可见，在光线变化比较大的情况下，特别容易产生噪声，经过噪声消除，可以区分出运动区域。 （a）原始图像 （b）获取的运动目标 （c）运动目标的噪声消除 图5 噪声处理Fig. 5 de-noising4 结论利用上述算法,
18、针对实际视频序列进行了多场景实验。在识别出运动目标后，能有效消除目标的阴影并去除噪声。在1G内存，P4计算机上处理速度为25ms/帧，能达到实时要求。把基于梯度的五帧差分法与背景差分法进行有效的结合，处理效果比任何一种单独使用的时候都好，在复杂的场景下也可以得到较为准确的检测结果。并且本文的阴影消除算法不但能消除各个方向的阴影，还能有效的修正运动目标的检测结果。这样也降低了后续阴影消除和噪声去除的复杂性。但是也存在不足之处，对较小的运动目标消除阴影时会，损失一些运动目标的信息，需要在实践中采用其他辅助方法进行改进。参考文献：1 Bors A G, Pitas I. Prediction and
19、 tracking of moving objects in image sequences J.IEEE Trans. on Image Pro-cessing, 2000,9(8):1441-1445.2 Lipton A, Fujiyoshi H, Patil R.Moving target classification and tracking from real-time video C/IEEE Work-shop on Applications of Computer Vision,Princeton:IEEE Press,1998:8-14.3杨莉，张弘,李玉山视频运动对象的自
20、动分割J计算机辅助设计与图形学学报,2004,16(3)：301-306.Yang Li, Zhang Hong, Li Yu-shan.Automatic Segmentation for Moving Objects in Video SequencesJJOURNAL OF COMPUTER-AIDED DESIGN & COMPUTER GRAPHICS, 2004,16(3)：301-306.4Libor Masek.Recognition of Human Iris Patterns for Biometric IdentificationEB/OL.2003. 2009.http
21、:www.csse.uwa.edu.au/pk/studentprojects/libor/.5童念念,段晓辉.车辆自动监控系统的捕捉算法研究C./第一届全国智能视觉监控学术会议论文集,北京:中国科学院自动化研究所,2002.6吕国亮,赵曙光, 赵俊.基于三帧差分和连通性检验的图像运动目标检测新方法J.液晶与显示,2007,2:87-92.Lu Guo-liang, Zhao Shu-guang ,Zhao Jun. Novel Method of Moving Object Detection Based on Three Frame Differencing and Connectivit
22、y CheckingJ.Chinese Journal of Liquid Crystals and Displays,2007,2:87-92.7徐梅宜.虹膜图像处理技术研究D.重庆:重庆大学,2004.8汪德洋.智能视频监控关键技术研究D. 西安：西安电子科技大学，2005.作者简介: 张起贵 （1963），男，山西太原人，教授,研究生导师，主要研究方向是数字图像识别与图像通信； 杜永峰 （1985），男，河南许昌人，在读硕士研究生，主要研究方向是数字图像处理。 张光伟 （1982），男，山东济宁人，在读硕士研究生，主要研究方向是数字图像处理。文章标题视频监控中运动目标的检测、阴影消除和去噪作者单位太原理工大学信息工程学院作者姓名 张起贵 杜永峰 张光伟研究方向数字图像处理E-mail Dufeng02联系电话15035137355邮 编手 机15035137355通信地址山西省太原市迎泽西大街79号太原理工大学9号公寓102宿舍投稿栏目图像分析
