基于SVM的群体异常行为识别方法研究正文

  • 格式:doc
  • 大小:778.00 KB
  • 文档页数:18

1.绪论1.1研究背景及意义当今社会是一个人口密集,高度复杂的社会,面临的突发事件和异常事件越来越多,其监测的难度和重要性也越来越突出。

现有的视频监测系统大多数只是进行场景内运动目标的监测和跟踪,进行进一步识别与行为理解等很少,虽然人们不断建立越来越大的视频监控系统,但这些监控系统也几乎沦为一种提供事后取证录像的工具。

然而,监控的目的就是对监视场景中的异常事件或监控对象的行为进行检测与分析。

在长时间视频序列中采用人工处理此类工作既不实用也不经济,因此在视频监控序列中进行一场检测十分重要而且必要。

群体异常事件检测作为一种应现实迫切需求而产生的研究领域,正受到越来越广泛的关注。

群体异常事件检测旨在从视频数据中发现隐藏着的、能刻画群体异常事件的特有的信息,并通过学习的方法训练检测模型,当下次有类似异常事件发生的时候,能够自动并及时的发出警报,以帮助人们及时的决策处理异常事件,避免事态进一步的扩大。

该领域的研究具有广泛的应用前景,己成为当前研究的热点之一。

群体异常事件检测系统的漏报与错报必然会给人们带来巨大的困扰和损失。

目前已有的各种群体异常检测算法大都在检测的准确率和时间效率上不尽人意,都不能应用于实际应用。

因此,有必要对群体异常检测算法进行更深入研究,开拓新思路,提出新算法,以提高准确率和时间效率,降低漏报错报率,进而能够更加快速高效地检测出聚集场景中的异常行为,提供更有价值的信息。

1.2 国内外研究动态及主要研究方法人类行为分析这一方向早已引起了人们的关注,1850年,E. J. Marey and E. Muybridge等拍摄运动的目标,并发现了人类及动物的运动中出现的许多令人惊喜的现象。

近年来,随着相关学科的发展,人类的运动分析作为计算机视觉的一个热点方向,吸引了大量的研究人员,美国、英国等发达国家,已经开始了大量人类行为识别项目的研究。

1997年美国国防高级研究项目署(Defense Advanced Research Projects Agency)与卡内基梅隆大学、麻省理工学院等诸多高校合作研究视觉监控的重大项目VSAM(Visual Surveillance And Monitoring),主要是研究对战场及普通民用场景下的目标行为识别技术;美国宾夕法尼亚州大学研究的三维人体头部及脸部跟踪系统,采用了有限元素模型对人脸动作进行实时跟踪;Microsoft公司也推出了3D体感摄影机Natal,逐步将基于视觉的人机交互接口应用到商业领域中。

人类群体异常行为的检测是人类行为识别的重要组成部分,这一领域的研究最近成为了热点。

Ramin Mehran等提出在图像中建立粒子,利用SFM(Social Force Model)描述粒子与周围空间的相互作用力,用力的强度来描述视频图像中行人行为,然后构建局部时空立方体并建立Bag-of-words模型,达到了较好的效果;Shandong Wu等也采用了一种粒子流动的方式,利用粒子的轨迹来描述局部的轨迹运动,实现了异常行为的检测与定位;针对极端拥挤场景中的异常行为检测问题,Louis 和Kratz使用基于梯度的时空模型描述场景运动信息,并用HMM来捕获时空模型之间的关系;Vijay Mahadevan等人用MDT模型化视频序列,然后分别检测模型在时空和空间上的异常,整合后判断异常行为是否出现;Ramin Mehran等人提出用脉线来表征拥挤的场景,清晰的描述了复杂场景下的人群行为。

基于SVM的群体异常行为识别方法研究目前,国外比较有代表性的实时系统有:(1)MIT的Plinder系统这个系统能用来实时地跟踪人,并分析理解人的行为,通过固定的摄像头,它可以适应不同类型的场景,但只能处理单个没有被遮挡的人体,并且要求人是站立的(2)CMU的VSAM系统1997年美国国防高级研究部署DARPA(Defense Adevanced Research Projects Agency)设立了以卡内基梅隆大学(Carnegie Mellon University)为首,麻省理工学院(Massachusetts Institute of Technology)等高校参与的视觉监控重大项目VSAM(Visual Surveillance and Monitoring),主要研究用于战场一普通民用场景进行监控的自动视频理解技术。

利用虚拟场景中的虚拟物体来代替人力监控费用昂贵,非常危险或者人力无法实现等场合的监控(3)Harilaoglu的W4系统Maryland大学的Haritaolu等人开发了W(What,Where,When,Who)系统。

是一个全面的人体动作的实时视觉监控系统,W不仅能够定位人和分割出人的身体部分,而且能够通过家里外观模型来实现多人的跟踪,并可以检测人是否携带物体简单行为,还可以进行人的标准姿势,如:站,做,躺,卧的行为识别。

此外,美国的雷丁大学(University of Reading)已经开展了对车辆和行人的跟踪机器交互作用识别的相关研究:IBM与Microsoft等公司也正逐步将基于视觉的手势识别技术应用于商业领域中,当前,国际上一些权威期刊将人的运动分析研究作为主题内容之一,为该领域研究人员提供更多的交流机会。

在国内,目前开展这方面研究的单位主要有中国科学院计算技术研究所、中国科学院自动化研究所、浙江大学人工智能研究所等。

虽然人类运动分析还属于一个新兴的研究领域,但却取得了良好的成绩。

例如,由中国科学院计算所研究的“三维人体运动仿真技术的定量辅助分析系统”“数字化三维人体运动的计算机仿真和分析技术”和“基于视频分析的技术”。

这些科研成果在雅典奥运会上得到了实际的应用,并且取得了巨大的成就。

中国科学院自动化研究所对人类的步态进行分析识别,进而判定人类的身份。

浙江大学主要研究人体动画,从视频流提取动画信息,替代传统运动捕捉设备。

微软亚洲研究院多媒体研究高级人机交互手段。

例如,通过对手势语言的理解,还可以进行聋人与计算机之间的手语交流。

尽管在人类简单行为研究中取得了一定成果,但国内的人类群体异常行为研究还处于一个发展的阶段,随着这一领域研究的深入及需求的提升,必然会有更多的研究者将精力投入到这一方向。

人的行为分析研究在视频监控系统中的应用往往关注与人的异常行为,目前,异常行为检测的实现方法通常有两类:(1)把小概率行为或与先验规则相反的行为看作异常行为(2)把与已知正常行为的模式不匹配的行为看作异常行为1.3 论文的主要内容及结构安排本文研究群体异常行为的检测,提出了一种具有一定创新意义并可行的方法。

本文重点对群体异常行为识别中的关键技术进行了如下研究:(1)根据人类群体运动的视频中存在时间和空间方向上剧烈变化的位置的特点及时空特征点方法在简单人体行为识别中取得的成功,提出了用时空特征点来描述人类群体的运动,选择了鲁棒方法Gabor小波函数方法用来提取时空特征点,通过实验验证了这种方法可以有效的解决人类群体异常行为检测问题。

在时空特征点的描述符建立阶段,引入了时空Haar特征构建描述符利用高斯混合模型对正常行为的特征点集建立模型,为每个关键词分配不同的概率权重,并且准确的描述了不同类别出现的概率和输入的时空特征属于各个类别的概率。

(2)为正常行为以及异常行为中的每个视频片段建立视频向量,将生成的视频向量对SVM 进行训练以及学习,输入已知类别的测试视频,利用已训练好的SVM对视频进行群体异常行为的测试,根据已知数据和得出的结果分析研究,得出SVM的识别率,并根据实际的结果对SVM进行参数调整和进一步的完善。

对已经完善的SVM分类器进行未知视频的预测,初步用于检测群体行为是正常或是异常论文各章内容安排如下:第一章绪论,研究背景意义、国内外研究现状、论文的主要内容及文章的结构安排。

第二章时空特征点的提取与描述符的构建,利用基于高斯和Gabor小波响应函数时空特征点检测方法提取时空特征点:然后阐述了对时空特征点的描述,采用了基于时空Haar特征描述符建立方法,通过描述符聚类建模,产生输入向量,第三章详细介绍了SVM的理论,阐述SVM的应用。

对描述符聚类建模生成描述向量,将正常行为视频和异常行为视频分别以时间为单位划分为N 帧,分别对每帧进行聚类生成描述向量并生成视频向量,这章中主要介绍了EM方法,混合高斯模型方法的基本原理,以及如何用基于EM的混合高斯模型估计模型的参数,输入视频向量对SVM进行训练,对已知的视频作为输入视频对SVM进行分辨率的检测,达到较高的分辨率后,对未知视频进行检测第四章实验数据结果与分析。

分别阐述了时空特征点的提取,描述符的构建,并对试验结果进行分析。

第五章总结,本章总结了本文所做的工作,成果和不足之处。

2. 视频底层运动特征的提取及聚类建模2.1 时空特征点对人体运动进行特征提取是行为识别的关键。

人体运动特征存在于视频图像中时间和空间方向像素值发生剧烈变化的位置,因为它们往往包含了丰富的信息,同时也具有较强的稳定性。

通过离散的特征点捕获表征这些位置就可以有效的描述人体行为,通常这些点我们称作为特征点。

2.2基于高斯和Gabor小波函数提取时空特征点时空特征点有能力捕获视频中人体的剧烈运动,并已经应用于简单行为识别中,因此我们可以将其合理的应用于群体异常行为检测中。

如何提取时空特征点是进行群体异常行为检测的关键。

本章选用的是基于高斯和Gabor小波函数的检测方法。

Dollár等人提出任何进行非匀速运动的人体区域都可以看作是时空特征点,使用简单的检测器也可以获得稠密的时空特征点。

Dollár方法未直接扩展二维空间检测器,而是提出了一种新的检测基于SVM 的群体异常行为识别方法研究器,这种检测器基于高斯和Gabor 小波函数,在本质上借鉴了Gabor 小波在图像分析中取得的成功。

在这种方法中,通过计算视频流时空中每一个像素点处的二维空间高斯和一维时间Gabor 小波函数响应值来确定时空特征点,若视频三维空间中某点响应值为局部极值且大于某一阈值,则认为该极值点为时空特征点。

响应函数定义为:22()()ev od R I g h I g h =**+** (2-1)其中,I 为视频流图像,(),;g x y σ为二维空域高斯平滑滤波器,ev h 和od h 为一维Gabor 时域滤波器,定义分别为:()()()2222/;,cos(2);,sin 2tev t od h t t e h t t e τττωπωτωπω--=-=- (2-2)σ和τ分别为空域和时域尺度,4ωτ=。

在时空特征点的尺度选择问题上,Dollár 认为基于这种响应函数的时空特征点检测器受尺度变化的影响较小,可以忽略。