视频诊断及视频浓缩摘要

1、背景智能视频监控技术是安防行业技术发展的重要发展方向。

以前，广泛应用在平安城市、银行、商场等场合的视频监控系统通常只是个简单的录像，以便用于事后的取证，而这样的应用损失了图像的基本价值（一个动态的、实时的媒质），就如同把直播变成录像一样，这与人们对视频系统真正需求是有差距的。

无数事实证明，事后追查是必须的，但事前的预警更为重要，它可以把一些重大事件隐患抑制于萌芽之中，避免亡羊补牢。

因此监控系统智能化成为一个重要研究方向。

2、智能视频分析技术概述2.1智能视频分析技术定义：源自计算机视觉技术，利用智能分析算法对视频内容进行运算和分析，它的核心技术是对视频内容的行为进行识别和分析，以提取视频场景中发生的一些特定的事件或监控目标的特定行为。

视频分析方法主要有两类：一类是背景减除方法。

是利用当前图象和背景图象的差分（SAD）来检测出运动区域的一种方法。

可以提供比较完整的运动目标特征数据。

精确度和灵敏度比较高，具有良好的性能表现。

背景的建模是背景减除法的技术关键。

一般采用在系统设置时期设置系统自适应学习时间来建模，根据背景实际“热闹程度”选取3－5分钟的学习时间。

一般系统建模完成后，随着时间的变化，背景会有一些改变，系统具有“背景维护”能力，即可以将一些后来融入背景的图象，如云等自动加为背景。

另一类是时间差分方法，是高级的VMD,又称相邻贞差法，就是利用视频图象特征，从连续得到的视频流中提取所需要的动态目标信息。

实质就是利用相邻帧图象相减来提取前景目标移动的信息。

此方法不能完全提取所有相关特征象素点，在运动实体内部可能产生空洞，智能检测出目标的边缘。

2.2智能视频分析技术原理：智能视频分析技术，是通过对视频信号进行处理、分析及内容理解，提取视野范围内运动个体的运动特征，通过将运动特征与一定预设规则的比较，让计算机自动“理解”视频内容，当发现满足一定规则条件的“行为”时实现智能化自动报警。

2.3智能视频分析过程：智能视频分析是利用计算机视觉技术，对画面进行分析、处理、应用的过程、包含如下过程：●背景学习过程：自动学习监视场景的背景情况●目标提取跟踪程：提取跟踪前景变化目标，检测并分析目标的活动●视频分析判断过程：根据规则追踪目标的活动判断是否违反预定义规则●加载预处理过程：加载用户的预定义规则●触发报警过程：确定目标活动违反规则，根据预定义传输报警的指定的用户2.4智能视频分析主要目的：1、化“被动监控”为主动监控——事前预警；2、计算机代替人工完成实时监视任务——事中处理；3、在海量视频数据中快速搜索目标/事件——事后取证。

视频质量诊断系统概述视频质量诊断系统是一种智能化视频故障分析与预警系统，对视频图像出现的雪花、滚屏、模糊、偏色、画面冻结、增益失衡、云台失控、视频信号丢失等常见摄像头故障、视频信号干扰、视频质量下降进行准确分析、判断和报警。

诊断内容视频冻结清晰度异常检测由于视频传输、摄像头故障引起的画面冻结检测由于镜头损坏、异物遮挡或人为蒙蔽引起的视野主体部分图像模糊/遮挡亮度过亮亮度过暗检测由于摄像头故障、增益控制紊乱、照明条件异常等原因引起的画面过亮等检测由于摄像头故障、增益控制紊乱、照明条件异常或人为恶意遮挡等原因引起的画面过暗等对比度异常偏色检测视频对比度异常检测由于线路接触不良、外部干扰或摄像头故障等原因造成的视频画面偏色噪声干扰条纹干扰检测由于线路老化、传输故障、接触不良、电磁干扰等因素造成的视频图像叠加噪声检测由于线路老化、传输故障、接触不良、电磁干扰等因素造成的视频图像出现条状、带状条纹干扰等现象视频信号缺失PTZ 失控检测因前端摄像机工作异常、损坏、人为恶意破坏或视频传输环节故障而引起的间发性或持续性的视频缺失现象检测部分PTZ 控制功能是否有效◆ 高准确度针对视频监控系统的视频信号进行深入分析，设计先进的故障诊断检测模块，并经过大量实际系统测试，检测准确率高。

◆ 出色的环境适应能力算法模块对于场景内由于车流、人流、季节、气候产生的光线、阴影变化不敏感，适用于多种不同的室内外环境。

◆ 自定义诊断流程根据位置、时间、巡检次数、巡检项目、设备优先级等要素设置预案，系统依据预案自动巡检摄像头。

◆ 简便的使用方式三分钟快速配置，即配即用；调整诊断任务和诊断标准，即时生效；一键导入站点和摄像机，无需人工配置；修改平台、摄像机、用户配置后，一键远程重启服务即可生效；系统集成数据库，无需单独安装。

◆ 更多特色独有支持任务优先级管理。

独特的摄像机设置特定的阈值参数。

截图。

城市公共场所往往有成千上万路监控摄像头遍布街头，昼夜不停地监视和录像，在改善社会治安的同时，也产生出海量的视频需要监控管理平台处理。

要对这些海量视频通过人工进行重点图像的抓拍，困难很大。

首先，需要对所有的视频录像进行诸秒浏览，才能发现重点图像，这无疑工作量巨大，甚至犹如大海捞针。

其次，即使找到了重点图像，人工抓拍，并且要记录下对应的原始视频图像的时间点等，也是工作量很大，效率很低。

由于人的生理特征所限，长时间观看视频录像，容易产生视觉疲劳，还有可能漏掉重要图像和线索。

理想情况是一旦有重要事件发生，系统就可在事后能快速查找到线索。

针对上述海量监控视频录像的事后分析，传统以人海战术为主的视频线索查找，显然不能满足高效查找，正面临巨大挑战，急需一种更为高效的、自动的、智能的系统实现上述需求。

目前，视频浓缩摘要技术和视频分类检索技术可以解决这一问题。

通过视频浓缩摘要，缩短视频事件的播放时间，通过目标分类筛查等实现快速查找事件线索，缩小查看范围的功能，这些都极大地减轻专业巡控队伍和系统维护人员的工作负荷，这些视频分析功能的实现和应用将大大提高监控效率。

这一技术将传统的事后被动调用图像信息变为主动发现视频监控图像的可疑点，并透过核查录入系统，负责将专业巡控队伍在发现可疑事件时抓取的图像、图片资源集中存储，并生成事件的描述信息，包括基于时间、地点（通道）、事件类型（技防告警、移动侦测等）、标记等，实现基于事件描述的精确查询功能及视频录像的秒级精确定位。

本解决方案所描述的“智能海量视频监控录像分析及核查录入解决方案”是深圳久凌软件技术有限公司核心产品解决方案。

其核心技术主要包括三部分：视频浓缩摘要与图像快照录入；视频目标分类筛查检索；视频增强和夜间视频处理。

这三部分块既可以单独使用也可以有机配合形成整体解决方案，该系统填补了我国海量视频监控事后分析取证及视频目标筛查检索的空白，技术在国际上处于领先地位。

一、视频浓缩摘要与图像快照录入子系统由于视频浏览和检索很耗时，大多数取得的视频并不会从头到尾观看和检查。

视频图像质量诊断系统综合方案✓图像模糊检测✓图像亮度异常诊断✓图像偏色检测✓图像雪花滚屏等噪声检测✓球机或云台操控失灵检测目录一、系统综述监控摄像机数量的不断增加，监控的时间不断延长，推动了平安城市建设的发展，也给监控系统的维护工作带来了新的挑战。

如何及时了解前端视频设备的运行情况，发现故障并检测恶意遮挡与破坏的不法行为已成为视频监控系统运行的首要迫切问题。

1.1声。

1.2中。

这项工作十分耗时繁重，因此一般维护工作会以半月或一月为周期定期检查，视频故障只能在检测的时候才能发现。

由于监视屏数量有限，维护人员往往在一个监视屏同时监看多台摄像机或随机抽取摄像头显示，造成部分监控点被漏看或被忽视；另外，维护人员存在一定的不稳定性、随意性和局限性，加上人的注意力有限、容易疲劳，会被其他事物干扰，使得这样的人工检查结果也不具客观性。

这种人工维护工作不仅费时费力，而且效果不好，视频信号在出现不同的常见故障后，往往不能及时地被维护人员发现，一旦发生紧急情况，再想补救已经来不及。

1.3、系统目标自主研发的视频质量诊断系统主要应用在视频监控系统的控制中心，通过轮询的方式对各路模拟或数字视频信号进行自动检测，利用先进的机器学习和计算机视觉技术，仿真人类的视觉系统，对视频图像出现的信号缺失、雪花、噪声、模糊、偏色、画面冻结、增益失衡和云台失控等常见摄像头故障以及故障严重程度做出准确判断，自动记录所有的检测结果，用户可通过互联网查询终端统计查询历史信息，并可根据摄像头所在分局或派出所、品牌、故障类型、故障严重程度等不同属性进行故障数和故障率的统计分析。

二、系统总体方案设计2.1、设计原则在系统设计中，我们遵循以下设计原则：●先进性：在系统设计和设备选型方面，在考虑系统的实用性前提下，采用国际上先进的视频图像算法与数字通讯技术，确保系统在国内的领先地位，使系统具有完备的功能，并且易于升级换代，在保证其先进性的●合。

●●●实现。

视频摘要技术在视频分析领域的作用文/周明耀杭州海康威视系统技术有限公司图像处理与智能分析部视频摘要的英文名是Video Abstract，它是一个可以概括原始视频主要内容的技术。

随着我们对视频数据处理的要求不断提高和视频数据量的不断增多，人们需要为一长段视频建立一段摘要来快速浏览以便更好地利用它。

通过视频摘要技术，让我们在基于内容的视频检索中不仅仅能利用文字，而且能够充分利用音视频信息。

视频摘要技术解决的问题是如何使视频数据有效的表示和快速的访问，它是利用对视频内容的分析来减小视频存储、分类和索引的代价，提高视频的使用效率、可用性和可访问性，它是基于内容的视频分析技术的发展。

一、视频摘要解释视频摘要技术的研究最早始于1994 年CMU 大学的Informedia工程, 随后德国曼海姆大学、FX Palo Alto 实验室、Minnesota大学、MITRE 公司、哥伦比亚大学与微软研究院等都在这方面进行了较为深入的研究, 分别提出了各自的视频摘要策略, 视频摘要的表现形式也由最初的静态摘要转变为现在的动态缩略视频。

总的来说视频摘要是对一长段视频内容的简短总结，即：视频摘要就是一连串静止或运动的图像，分别称为静态视频摘要和动态视频摘要，它们用精简的方式代表了原视频的内容，同时保留了原内容的要点。

静态视频摘要是从原始视频中剪取而生成的一系列静止图像的集合，这些代表了原始视频的图像成为关键帧，动态视频摘要是由一些图像序列以及对应的音频组成，它本身是一个视频片断。

两者区别是静态视频摘要只考虑其关键帧，忽略了音频信息，生成摘要的速度比动态视频摘要快，动态视频摘要表现的内容比静态视频摘要丰富，通常以镜头的方式表示，融合了图像、声音和文字等信息。

视频摘要的作用主要是便于存储和视频的浏览或查找，相对于原始的视频资料，视频摘要的长度要短很多，节省了存储时间、空间。

视频摘要保留了原内容的要点，所以对于用户来说，浏览或查找视频摘要比浏览原始视频要节省时间。