视频图像信息智能应用技术解决方案


1 项目概述

1.1 项目概况

目前我国正处于犯罪高发阶段,同时各种恐怖活动、突发性事件对我国现有治安防范体系提出了更加严峻的考验。如何提升城市安全防御能力,防御重大恐怖活动和公共突发事件的发生,扼制犯罪高发态势成为摆在公安机关面前的一个重大课题。

近年来,随着信息技术、网络技术的迅猛发展,全国各地视频监控系统的发展非常迅速,在基层公安机关打击、预防违法犯罪方面起到了良好的作用。同时,由于系统应用的不断深入,系统规模的不断扩大,系统的整合需求日益强烈,各级公安机关也对视频图像资源共享提出了新的要求。各警种跨区域图像共享需求日益增多,监控系统管理范围不断加大,本项目的建设,正是在当今现实环境下落实公安部“科技强警”战略的重要举措。通过监控系统的互联,综合应用各种监控资源,构建智能化、安全化、网络化监控系统,逐步实现视频基础联网、共享管理以及深度应用,是在新形势下完善城市治安防控体系、提高城市治安防控体系建设水平的重要工作,也是公安平台建设的目标和任务。

本方案立足视频图像信息联网建设,推动跨区域、跨部门、跨警种视频图像信息有效整合,拓展视频图像技术应用的广度和深度,提升公安机关核心战斗力,为预防打击违法犯罪、维护社会稳定提供视频图像技术支撑。

1.2 建设内容

当前治安形势多样性、复杂性、犯罪作案手段隐蔽性以及刑事案件高发,这些都对公安部门提出更高的要求,本次项目主要建设以下内容:

1、 视频联网基础软件平台

2、 社会面视频联网基础软件平台

3、 无线视频转码及发布软件模块

4、 视频安全评测工具箱

5、 视频安全评估系统

6、 视频安全性能测试系统

7、 视频共享管理平台软件

8、 视频运维管理子系统

9、 视频图像快速搜索系统

10、 动态目标智能挖掘系统

11、 事件关联实时预警系统

12、 视频解析算法孵化系统

项目设计方案

2.1 技术路线

2.1.1 云计算技术架构

系统采用云架构技术构建,模块化的设计,组件化的技术,模块可裁剪,组件可增扩,保证新功能、业务模块添加的便捷,在线服务扩容。客户端模块动态加载机制,降低对客户机的性能要求。支持DIY的系统登陆界面,支持国标28181、ONVIF的设备接入,通过浙江省厅国标28181的符合性测试。

2.1.2 基于微服务技术

现在主流的设计一般会采用微服务架构,其思路不是开发一个巨大的单体式应用,而是将应用分解为小的、互相连接的微服务。微服务架构是一种将单应用程序作为一套小型服务开发的方法,每种应用程序都在其自己的进程中运行,并与轻量级机制(通常是HTTP资源的API)进行通信。这些服务是围绕业务功能构建的,可以通过全自动部署机制进行独立部署。这些服务的集中化管理已经是最少的,它们可以用不同的编程语言编写,并使用不同的数据存储技术。

2.1.3 JEE标准的分布式结构

基于J2EE标准的分布式体系结构设计,一方面使应用系统具有平台独立性,可以部署在任何符合JEE规范的应用服务器(如Weblogic、Webshpere、JBOSS等),提高系统的可部署性,降低维护和管理成本。同时可以充分利用现有的成熟的JEE技术平台积累,实现系统设计的高度灵活性和扩展性。

JEE(Java Platform,Enterprise Edition)是SUN公司定义的一个开发分布式企业级应用的规范。它提供了一个多层次的分布式应用模型和一系列开发技术规范。多层次分布式应用模型是指根据功能把应用逻辑分成多个层次,每个层次支持相应的服务器和组件,组件在分布式服务器的组件容器中运行(如Servlet组件在Servlet容器上运行,EJB组件在EJB容器上运行),容器间通过相关的协议进行通讯,实现组件间的相互调用。遵从这个规范的开发者将得到行业的广泛支持,使企业级应用的开发变得简单、快速。

2.1.4 Web Service实现异构共享

平台需要提供开放、可扩展的基于网络的数据服务,甚至业务服务,实现异构信息系统和互访,Web Service标准可以解决同构、异构应用互访。

Web Service是一套标准,它定义了各种应用程序如何在Web上实现互操作。通过Web Service标准实现查询和访问。

Web Service提供一套标准XML和XSD标准,用于沟通不同平台、编程语言和组件模型中的不同类型系统。Web Service提供一种标准WSDL来描述Web Service,使用户可以得到足够的信息来调用这个Web Service。Web Service采用远程过程调用协议(RPC),来对这个Web Service进行远程调用,为了达到互操作性,这种RPC协议(即SOAP协议)与平台和编程语言无关。

2.2 视频联网基础软件平台

2.2.1 平台概述

视频联网基础软件平台对整网的视频监控系统进行调度和管理,采用全中文图形化界面、操作简单,符合用户常用的操作习惯,并能提供相关操作的联机帮助。软件符合GB/T 28181-2022《公共安全视频监控联网系统信息传输、交换、控制技术要求》相关规定,实现全网视频信息共享和互联互控,综合利用各种图像监控资源和技术。系统软件系统的设计应符合控制面和数据面分离的原则,软件管理模块不参与码流的转发、存储等工作,尽可能减轻管理服务器的负荷,提高系统可靠性。

在实现时遵循如下设计思路:

采用模块化设计思路,根据高内聚,低耦合的方式定义系统、逻辑管理、标准接入、物理资源的联系。数据与应用相对独立,应用与控制参数相对独立,以便于系统的调整与升级,适应不断发展的管理需求。保证各项技术可以不断的更新和升级以维持系统的先进性,使系统软件具有较长的生命周期。

标准是平台整合的基础,主要体现在统一编码的强制标准性、应用开放接口及中间逻辑层的强制标准,此外标准还涉及制度和规章。

强化应用,系统将建立统一的、标准的、开放的调用接口,供各应用系统调用,同时将建立预案报警支撑系统和警视联动系统等应用。

平台软件采用模块化开发,各功能模块可以云服务分布式安装,以服务方式运行;平台软件支持SSL协议等加密方式进行传输,并支持公安部统一使用的USB密钥PKI认证方式,保证身份认证的安全性。

平台软件设计采用SOA面向服务体系架构的设计思想,WEB服务应基于Web2.0技术和XML协议标准,使监控软件能方便被上层B/S架构业务系统集成。

系统平台各服务系统支持热备或互备部署方式,防止单点故障,提升系统可靠性。系统平台应支持平滑扩容升级,扩容升级不影响现有业务。

2.2.2 系统设计

云服务支持:视频联网基础平台支持云服务部署,如云环境基础服务、分布式服务、全局统一存储服务、地理信息服务、用户权限认证服务等,业务应用服务包括车牌识别服务、车标识别服务、车辆研判分析服务、视频智能分析与检索服务等全局应用服务,业务应用服务的开发应符合云计算中心体系架构中的应用服务规定的格式与规范。

微服务架构:基于容器服务提供高性能可伸缩的容器应用管理服务,支持用Docker 和 Kubernetes进行容器化应用的生命周期管理,提供多种应用发布方式和持续交付能力并支持微服务架构。用Scale Cube方法设计应用架构,将应用服务按功能拆分成一组相互协作的服务。每个服务负责一组特定、相关的功能。每个服务可以有自己独立的数据库,从而保证与其他服务解耦。

联网平台建设:以公安信息网为承载网建设符合国标的联网平台,整合公安信息网内图像资源,并通过边界安全设备汇接视频专网图像资源,同时依托公安信息网纵向级联。

2.2.3 功能描述

一、 国家标准符合性

软件符合GB/T 2818-2016《公共安全视频监控联网系统信息传输、交换、控制技术要求》相关规定,且欣智恒公承诺,该定制软件验收时,能够提供国家认可的权威机构出具的检测报告。可实现与上下级联网的管理、认证和日志;通过加载中间件模块,可选配异构模拟矩阵、异构设备(硬盘录像机、视频服务器、网络摄像机、网络硬盘录像机等)、异构视频监控平台、报警主机、语音主机模块,以实现与各类异构资源的接入管理;可实现双机热备、集群管理功能。

二、 支持云计算、微服务软件架构

支持云服务部署,如云环境基础服务、分布式服务、统一存储服务、地理信息服务、用户权限认证服务等,业务应用服务包括车牌识别服务、车标识别服务、车辆研判分析服务、视频智能分析与检索服务等全局应用服务,业务应用服务的开发应符合云计算中心体系架构中的应用服务规定的格式与规范。

支持微服务架构提供高性能可伸缩的容器应用管理服务,支持用Docker和Kubernetes进行容器化应用的生命周期管理,提供多种应用发布方式和持续交付能力并支持微服务架构。用Scale Cube方法设计应用架构,将应用服务按功能拆分成一组相互协作的服务。每个服务负责一组特定、相关的功能。每个服务可以有自己独立的数据库,从而保证与其他服务解耦。

三、 基础视频应用功能

支持视频实时点播、录像回放/下载、云台控制、电子巡逻等功能。

(1)实时点播

监控客户端可实时监视多路实时图像信息并实现“一机多屏”监视;多个网络客户端可以同时监控任意前端图像;并提供报障和报警功能。

支持视频实时播放过程中,对视频亮度、对比度以及色度等色彩的本地调节功能;

支持将任意实时直播图像进行抓拍、存为JPEG或BMP格式的图片;

支持多种分辨率视频解码功能,支持QCIF、CIF、Half-D1、D1、720P、1080P分辨率的视频解码;

支持单画面、四画面、六画面、八画面、九画面、十二画面、十三画面、十六画面的视频播放模式。

(2)录像回放与下载

持多画面同时回放:支持同时回放多个服务器或本地的多个存储通道的同一时间的录像文件,多达16画面同时同步回放,支持单画面、四画面、六画面、八画面、九画面、十二画面、十三画面、十六画面的画面显示;

支持多功能回放,可跳转至输入的时间点前后一小时(该时间段可更改)的录像(任意时间段选择、回放速率任意选择),并且可实现单帧回放;

支持多种回放操作:回放时可以进行暂停、播放、停止、快放、慢放、前进/后退30s、数字放大、添加帧标记、发送至扩展屏或电视墙、精确定位到某帧、缩放、备份、调节音量、调节亮度、色度、对比度、饱和度操作;

支持画面抓拍:将任意一帧回放图像存为JPEG或BMP格式的图片;

同步回放:勾选同步回放后,所有打开的录像由统一时间轴线进行进度控制,便于定位查看多路摄像机同一时间的录像,统一调整进度。

锁定回放:支持自动按照当前各录像间的时间差播放视频,并支持录像进度调整,适用于已知目标经过不同摄像机的时间差,而利用该时间差寻找嫌疑人的情况。

框选下载:支持在录像进度条上进行框选,下载该时间段的录像,并可对下载视频的格式进行选择,支持框选多路录像进行下载。下载录像的进度可在“下载管理”处进行查看

下载管理:对下载任务进行停止或删除,并支持打开文件所在目录,及将视频或截图一键上传视图库。

(3)支持视频资源灵活组织展现功能

支持按照监控区域、管理权限和实际使用情况(如行进路线)对摄像机分组。例如可按政府、医院、银行、学校等行政单位分组,也可按用户自定义重点监控区域分组等。

(4)支持媒体转发分发功能

在多用户并发访问同一个图像资源时,能提供视频分发服务。设定启动视频分发服务的触发条件(如并发连接数),当满足触发条件时,视频分发模块与视频编码设备建立单路连接,然后视频分发模块将图像分发给请求服务的设备(视频解码设备和客户端)。支持所有流媒体服务器组成集群在管理单元的统一分配下协同完成对前端设备的视频转发工作,并实时向管理单元反馈自身的工作状况信息。

四、 视频图像管理功能

(1)支持用户/用户组管理、设备/设备组、用户授权管理、联网路由管理等功能。

组织机构:可以定义,增加,修改以及删除组织树上的若干级组织机构,可以增加子机构以及所辖的前端设备、监控终端、用户。管理员可根据组织机构的类型的不同添加不同类型的二级机构。

角色管理:可以定义,修改,删除具体角色及其权限,可定义若干角色为系统权限、包含权限和排除权限。可根据不同的用户权限需要进行不同的授权。

系统权限:用于定义角色为特定的某些功能权限的集合,包含权限用于定义角色对于某些设备资源具有访问权,排除权限用于定义角色对于某些设备资源不具有访问权。

用户管理:可在相对应的机构下面增加一个用户,可以对用户的信息进行描述,包括云台的控制级别,手机,邮箱,用户名的有效时间,和是否停用或启用。对添加的用户可以进行修改,删除,角色关联,级联设置,及用户查询。

设备管理:支持添加IP摄像头、数字化编码设备和报警设备,添加设备时需选择设备类型、设备型号、生产厂家、联系人、联系电话、购买日期、保修期限等信息;可远程设置设备参数,可设置的内容决定于设备厂商SDK的支持。

流媒体管理:可以配置流媒体服务设备转发参数,系统管理平台可设置若干个流媒体服务,每个流媒体服务需设置服务名称、IP地址、端口、所关联的客户端IP段、最大带宽参数;系统通过判断客户端软件所属的IP地址范围和访问的视频图像的不同,自动通过某个流媒体服务设备转发,并且可指定用户可使用的最大并发连接数和带宽。

(2)具备视频资源数据质量治理功能

统计报表:支持统计某个时刻所有在线用户的信息,包括用户名、登录的IP地址、登录的时间和所属的机构等。支持对所有的设备和通道按照所在的机构进行统计,包括设备总数、通道总数和已经启用的通道数量等,可以生成报表并导出。

(3)具有系统接入管理,支持千万级以上视频资源的接入与管理

(4)具备校时功能

设备校时管理:各级节点的管理平台、前端设备之间可进行手动或者自动的时钟同步。

(5)支持对平台用户登录、注销登录、实时点播、录像回放/下载等操作进行日志记录和管理。用户可搜索查询用户访问操作日志,包括日志来源、等级、操作用户、操作者IP地址和具体的操作内容,设备所属的组织、设备的名称、访问的端口、具体操作内容和操作结果等,可以生成报表并导出。

用户可查询统计最近一次设备状态巡检的统计日志。

用户可查询检索任何一级机构下的报警信息记录,可以按照报警源、报警等级、报警类型和报警时间组合查询,可以生成报表并导出。

五、 地图应用功能

支持用户自定义多级电子地图,在各级电子地图上布置监控、报警点,报警时在地图上显示报警位置,可以通过地图上监控点和报警点的图标链接来直接定位到相应的视频图像窗口。

结合GIS系统实现事件现场精确定位,提供准确的地理位置信息,提高对应急事件的响应能力及速度。可在地图上定位摄像机,并可直接打开摄像机的实时图像;对摄像机进行模糊查找,并能自动打开视频图像;报警地点能够自动在地图上予以显示;在地图上可以显示各种警情统计数据。融合GIS矢量地图、报警信息、事件汇总、视频图像、设备状态、位置分布等信息于一体,直观显示多种信息及资源汇总,并支持标准格式的图片文件直接导入(BMP/JPEG/AutoCAD等)到系统平台之中。

六、 流媒体分发能

流媒体服务实现多级流媒体之间的转发,分散访问压力,提高系统稳定性。在多用户并发访问同一个图像资源时,能提供视频分发服务。设定启动视频分发服务的触发条件(如并发连接数),当满足触发条件时,视频分发模块与视频编码设备建立单路连接,然后视频分发模块将图像分发给请求服务的设备(视频解码设备和客户端)。支持所有流媒体服务器组成集群在管理单元的统一分配下协同完成对前端设备的视频转发工作,并实时向管理单元反馈自身的工作状况信息。

在万兆光纤网络环境下,单台流媒体服务器支持的流媒体处理能力不小于4Gbps。

七、 流媒体存储能力

通过流媒体转发服务向设备获取视音频数据,存储在第三方存储介质上,支持标准的NFS、SAMBA、ISCSI等文件协议,支持云存储。支持中心存储、回放,支持设备端录像的查询、回放、下载等操作。执行存储计划。支持标准的流媒体协议。在万兆光纤网络环境下,单台流媒体服务器支持的流媒体存储能力不小于128路并发存储。

八、 高可用性

平台应用程序支持集群化或主从备份等多通道部署方式,通过负载均衡软硬件设备等进行平台访问分流,规避单节点故障导致平台不可用风险。

2.3 社会面视频联网基础软件平台

2.3.1 平台概述

随着各地视频监控系统建设的不断推进和深入,视频监控前端摄像机的建设规模和覆盖范围日益扩大,其中,由社会单位(党政机关、企事业单位、社会团体、酒店、宾馆、网吧等)自行投资建设的视频监控前端摄像机,在极大地保障了单位安全的同时,也有效的弥补了公共监控点资源不足、监控盲点较多等问题。

社会单位建设的视频监控系统数量多,但形式散、不成体系、不联网,相互独立,一定程度上存在着视频监控资源共享难、重复建设等问题。为最大限度发挥视频监控系统的应用效能,在整合公安监控资源的基础上,将重点单位周界摄录公共区域前端摄像机接入公安视频综合平台,使之与公共监控点优势互补,联动作战,达到全社会监控资源共享共用的目标。

2.3.2 接入方式

一、数字平台接入

对于拥有成熟数字视频监控平台的社会单位,图像清晰、视频资源存储安全可靠,可以采用GB/T 28181标准进行对接,也支持像DB33等地方标准协议进行对接。

二、数字前端接入

对于拥有数字摄像机、DVR、NVR和IPC 等数字前端设备,且设备符合视频监控资源联网标准,并可与外部联网的社会视频资源,采用四种方式对接:

1. 支持新国标28181、onvif、PSIA、RTSP协议的前端数字或网络摄像机通过标准化转码前端盒汇总接入。

2.同型号供货量超过1000台的大型品牌网络摄像机,支持新国标GB28181、onvif协议或厂家提供SDK方式,通过设备接入网关进行集中接入。

3.支持国标28181、onvif的DVR、NVR通过设备接入网关直接接入。

4.对于不符合标准协议的数字前端,计划通过增加符合技术规范要求的编码设备进行标准化改造接入,无法改造的进行标准化替换。

三、模拟前端接入

对于模拟前端接入,需要通过DVR设备或其他编码设备信号转码,并将转码后的网络信号回传到后端进行平台接入。目前模拟前端建设策略包括:

1.对于拥有模拟前端摄像机,但其DVR等设备不能直接联入外部网络的社会面平台,通过视频分配器+编码器的方式,将原有视频信号分出一路进行后端转码对接。

2.对于无平台的社会面点位,通过替换DVR,将模拟信号转换为网络信号一方面进行本地视频存储,另一方面提供有线或无线方式回传社会面资源网。

3.对于新建点位或老旧点位,涉及到复杂线路改造、或者党政机关施工困难的,在不改变原有铺设线路的情况下,通过HDCVI等新型标改高清技术替代方案进行设备替换,从而完成整体系统平滑升级。

四、其他类型接入

对于不符合视频监控资源联网系统技术标准的,其他各类型前端及平台系统,可以根据实际情况通过(分期)改造方式或者替换方式接入本次项目的系统平台。

互通接口设计

基于GB/T 28181标准实现各级平台间互联互通,两个不同的标准监控报警网络通过信令安全路由网关进行信令对接,支持的功能包括:注册、实时视音频点播、设备控制、报警事件通知和分发、设备信息查询、状态信息报送、历史视音频文件检索、历史视音频回放、历史视音频文件下载、网络校时、订阅和通知等。

非标准平台互联

标准信令监控域与非标准信令监控域通过平台接入网关进行互联。转换网关是非标准信令监控域接入标准信令监控域的接口设备,在多个层次上对联网系统信息数据进行转换。对于第三方的行业平台接入,若第三方平台不支持国标接入,则需要对平台进行标准化改造后才能联网。

网络摄像机、模拟录像机、网络录像机、视频服务器、联网网关等设备采用统一的接口标准规范,应支持GB/T 28181-2011标准或ONVIF协议。

2.3.3 功能描述

一、异构互联网视频系统接入和管理

平台支持通过互联网接入和管理异构互联网视频系统,根据权限获取异构互联网视频系统内的视频点位资源等。通过安全隔离交换设备,通过国标或私有协议形式对接社会视频接入管理平台,实现社会异构互联网视频整合接入到公安视频专网内的视频共享平台。

SIP网关可实现多级异构平台的标准化级联/互联,实现平台间的信令标准化、信令控制、信令交互、信令路由等功能。SIP网关的应用使平台层的差异性得到了屏蔽,同时能够灵活部署,满足不同规模平台联网需求。

二、兼容GB/T28181国家标准

兼容支持GB/T28181-2016国家标准,支持满足GB/T 28181的所有平台的接入,同时提供统一的标准协议接口,可无缝接入标准视频监控平台,实现了跨平台跨网域联网。在前端点位不满足国标时,平台可通过SDK方式直接接入前端编码设备,按照原已建前端图像采集设备的编码方式和相关SDK开发包提供的接入方式,对已建系统采用组件式开发,最终形成专属开发文件进行加密封装,直接对硬盘录像机、编码器、网络摄像机等采用组件接入即可。

三、视频格式转换

支持对接入的异构互联网视频系统内的视频点位视音频进行视音频格式转换,转换为GB/T28181-2016标准媒体流格式,为平台实时点播等业务提供流媒体服务。

支持各种设备或平台之间流媒体数据格式的转换,使非标的视频格式满足国标GB/T28181-2022中规定的媒体编码格式的要求。视频转码服务主要实现媒体传输协议双向转换、媒体数据编码格式双向转换、移动终端视频转码、智能路由、负载均衡和视频转码管理。

提供视频解码网关,支持视频解码、数模转换、以及对高清数字解码设备的配置、控制和级联等服务。视频解码服务主要实现视频解码、参数配置、级联管理、日志管理。

四、支持接入ONVIF视频系统

兼容支持ONVIF标准视频系统接入和管理,根据权限获取ONVIF标准视频系统内的视频点位资源等进行实时点播等操作。ONVIF标准视频系统采用ONVIF标准协议的直接接入,而考虑到第三方接入问题和网络安全隔离问题,可采用社会面专用NVR接入网关进行专项接入。

五、支持接入第三方私有协议视频系统

兼容支持海康等第三方私有协议互联网视频系统的接入和管理,根据权限获取第三方私有协议视频系统内的视频点位资源等进行实时点播等操作。

第三方非主流或非开放的视频编解码设备采用社会单位视频监控设备SDK开发接口和协议接入,可以考虑使用设备接入云网关服务器将社会单位视频图像统一接入为标准格式(GB/T-28181标准、ONVIF标准)。

对无法提供SDK开发接口和协议的厂家,可替换为符合标准协议(GB/T-28181标准、ONVIF)的编码器进行升级改造。

六、实时点播、录像回放/下载

支持对接入的异构互联网视频系统内的视频点位资源进行实时点播、录像回放/下载等操作。

1. 实时图像点播

能按照指定设备、指定通道进行图像的实时点播,支持点播图像的显示、缩放、抓拍和录像,支持多用户对同一图像资源的同时点播。

2. 远程控制功能

能通过操作可对前端设备的各种动作进行遥控;能设定控制优先级,对级别高的用户请求应有相应措施保证优先响应。

3. 图像检索回放

能按照指定设备、通道、时间、报警信息等要素检索历史图像资料并回放和下载;回放应支持正常播放、快速播放、慢速播放、进退、画面暂停、图像抓拍等、录像切换播放。

4. 移动视频监控

平台可支持手机移动视频监控应用,通过安全网闸实现视频专网与移动互联网的安全隔离,并且为移动互联网上的手机移动终端提供移动视频监控的功能,比如实时视频点播,云镜操控,本地抓拍,录像等。

5. 语音对讲功能

通过监控客户端,可以选择任意一台监控设备发起语音对讲;可以选择多种语音对讲格式,匹配不同设备的对讲协议,提升对讲效果。

七、用户及操作权限管理

支持平台用户及操作权限分组管理

八、支持管理和配置流媒体服务

支持平台流媒体服务动态配置和管理。

九、兼容GB/T25724(SVAC)国家标准

兼容支持GB/T25724国家标准,支持接入和管理符合GB/T25724标准的前端视频监控设备。

十、日志管理

支持对平台用户登录、注销登录、实时点播、录像回放/下载等操作进行日志记录和管理。

十一、电子地图

支持GIS地图上监控点位标注,支持基于GIS地图进行实时点播、录像回放/下载等视频操作。

视频监控系统对GIS的传统应用,主要体现在设备的标注,包括监控设备、存储设备、卡口设备、报警设备和各类传感器等。通过GIS标注,可以把视频系统的相关操作转移到GIS中展现,同时,根据高内聚、低耦合的原则,规范双方调用接口。随着系统的发展,公安实战中的相关业务,如应急指挥、安保巡检等,也希望通过挂图作战的方式实现。下面,从标注、基础应用、移动、特色功能等几个方面介绍相关应用。

(1)“一张图”集成展示

视频监控、卡口、电子警察、警车、移动单兵、社会资源等均能够在电子地图中上显示设备类型、状态、位置都能直观的显示。如下图所示,监控视频和卡口分别用不同的图标显示;设备是否在线,也用不同的颜色标注;结合电子地图,利用设备的位置坐标信息,能直观的了解设备的位置。如果出现报警信息,也会在电子地图中相应的报警位置来显示,报警信息一目了然。

(2)快捷定位

往往视频监控、卡口数以千计,在如此庞大的数量面前,如何快速准确的找到自己需要的监控录像,成为一个难题。平台提供多种方式,能够快捷的定位到用户所需要的监控视频,大大提高了寻找目标设备的效率。

(3)首页导航

通过电子地图的首页,可以清晰选择不同类型的监控,也可以通过建筑物的搜寻来找到附近的监控点位。在选择了监控类型之后,还能够通过进一步的细分,如设备类型、组织接口、监控类别等,来进一步缩小范围。

(4)视野内搜索

在确定了案发现场,只需要搜索指定区域内的视频、卡口资源,可以直接从电子地图中找到相应的区域范围,然后通过视野内搜索功能,找寻在地图所示范围内的点位。同样,也可以通过类型选择和模糊搜索来缩小范围,精确搜索。

(5)自主定位

如果对某个区域非常熟悉,可以直接在地图中找到某个位置,通过地图工具、放大、缩小和移动地图,也可以用鼠标拖曳,滚轮放大缩小等操作,来定位某个具体地点。例如用户知道某大街与某某路交叉口有个监控点位,可以直接找到该交叉口,定位到该监控摄像。

(6)一站式操作

平台提供一站式操作服务体验:所有的监控点位、卡口、社会资源、报警信息都能在电子地图上进行实时视频点播、控制、光圈调整、聚焦变倍、鼠标模拟、三维定位、录像下载、解码上墙、设备保修等一站式的操作,极大的提升系统的易用性。

(7)基本信息

在电子地图上点击设备图标,即能够显示该设备的基本信息,包括通道名称、资产厂商、资产类型、资产型号、所属组织、监控类别等实用信息,并提供画面快照。

(8)实时视频点播

在电子地图点击实时视频图标,支持视频设备的实时视频点播、球机和云台的控制、摄像机光圈放大缩小、聚焦扩焦、放大缩小、三维定位、鼠标模拟等操作,并且在实时视频界面通过快捷菜单,可实现本地录像、语音对讲、抓图、音频等快捷操作,极大的提升易用性。

当用户使用球机时,可点击“鼠标模拟”按钮,实时视频界面会出现9个快捷按钮,点击按钮,球机即时转向所指方向,同时在画面鼠标所点位置会出现一个快捷箭头,点击鼠标左键,球机云台即跟随快捷键头的指向转动,为用户操控球机提供极大便利。

(9)录像回放

在电子地图点击录像回放图标,支持该通道录像的搜索与播放。支持根据日期来对设备录像和中心录像进行搜索,而且支持1/8倍速~8倍速播放和逐帧播放,办案民警可以根据需要选择不同的速率进行浏览。在发现有价值的视频片段,可以通过快捷菜单中的录像功能,将视频片段保留在本地。

(10)解码上墙

在电子地图点击视频上墙图标,可以选择电视墙和视频通道,将视频上墙显示。也可以把当前通道的显示保存为任务,下次只需要启动任务,免去每个视频添加上墙等初始设置。

(11)地图报修

在电子地图点击一键维护图标,可以方便的进行报修,能使运维人员第一时间了解到设备的故障信息。

(12)报警信息

在电子地图点击报警信息图标,可以搜索查看该通道的历史报警信息。

(13)周边搜索

关联搜索可以查找某个监控点位周围其他的视频点位。

(14)视频多选

实际应用中,往往需要查看多个监控的图像,一个一个选择费时费力,效率低下。平台提供了多种选择方式,能将相关联的监控点位同时选取,对选取的所有摄像头能够同时打开实时画面,调取录像或解码上墙等操作。

(15)线选应用

如果了解嫌疑人或车的具体路径,想调取路径上的摄像头画面或者录像,使用线选功能,画出想要查找的路径,即可得到在嫌疑人或车经过路径上所有监控。通过监控实时画面,调取分析录像来获取线索,侦破案件。

(16)框选圈选

如果已经知道嫌疑人的落脚点,或者作案范围,通过框选或者圈选将某个范围内的摄像头全部选定,即可得到在嫌疑人落脚点或作案范围内所有监控。通过监控实时画面,调取分析录像来获取线索,侦破案件。

(17)可视域应用

平台支持可视域应用,将摄像头所覆盖的监控范围显示在地图上,并将实时画面在小窗口中展现。并且通过拖拉可视域范围,可以实现对球机的云台控制,不仅可以转动,而且可以放大缩小,使用户更方面快捷的调整到自己想要的视角。

(18)报警定位

为了能快速找到报警点位,可以通过电子地图中报警点位的功能,快速搜索和定位发生报警的监控。有利于监控中心及时作出应对措施。

(19)警卫巡逻

警卫巡逻功能可以制作摄像头巡逻预案,将预先选定的摄像头按顺序快速切换,无需多次选择。在执行保障任务和领导人出访任务时,将保障区域,或者领导人出访的线路中的摄像头设置警卫巡逻任务,就可以随时锁定目标区域,通过上下方向键,就能快速切换监控点位。

(20)地图工具

平台电子地图提供了方便的工具,帮助用户更好地利用电子地图。

图层显示

某个区域的设备很多,在地图中层层叠叠无法辨认。图层显示功能可以筛选地图上的设备资源。只要选择自己需要的设备类型,是地图显示更简洁清晰。

地图测绘

在办案过程中,需要对实地的距离、面积做测绘,也需要标记一些线索、资源信息。平台提供了一些简单易用的测绘工具,帮助办案民警对案发现场进行研判,信息收集。

全屏显示

平台提供全屏功能,可以通过全屏显示更多地图内容。

十二、视频秒播

支持平台内部分视频的秒级播放

2.4 无线视频转码及发布软件模块

2.4.1 无线视频转码设计

为规范后续新建视频系统标准,本章将描述无线视频资源的建设规范和功能标准。无线接入网络参照《全国公安移动警务建设总体技术方案》相关要求进行建设。

联网系统需要整合接入不同类型网络的前端,特别是通过公网(互联网)主动注册方式接入的前端设备,由于互联网环境下网络带宽、时延、连通性存在风险,因此需要对标准(针对专网/私网环境设计)的28181协议进行优化,使之在传输层面满足多种网络环境的要求。

接入视频、音频、数据等信息传输、交换、控制的通信协议的结构见下图所示。

通信协议结构图

联网系统在进行视音频传输及控制时应建立两个传输通道:会话通道和媒体流通道。会话通道用于在设备之间建立会话并传输系统控制命令;媒体流通道用于传输视音频数据,经过压缩编码的视音频流采用RTP/RTCP传输。

系统中视频压缩编解码和音频编解码应符合GB/T28181-2016的相关要求,视频编码应支持H.264、SVAC 或 MPEG-4 视频编码标准,音频编解码标准应支持G.711或G.723.1或G.729音频编码标准。

社会单位的视频资源分布在多个不同的网络环境中(行业单位专网或私网、互联网等),按照社会单位视频监控系统建设模式的不同划分为两种不同的接入方式,可根据实际情况选择相应接入方式实现社会单位视频监控资源的共享接入。

2.4.2 功能描述

一、 多种分辨率/不同码率GB/T28181标准媒体流互转

支持多种分辨率/不同码率GB/T28181标准媒体流互转;视频编码格式至少支持H.264;SIP媒体单元,严格按照GB/T 28181-2022的要求,用于国标视频流传输及转码,已建的视频资源经过国标媒体处理,标准编码格式视频流直接传输至客户端,非标编码格式视频经过媒体单元转码,转为标准编码格式后发送至客户端。

二、 支持网络信令调度和管理

支持IP网络环境下通过信令进行转码任务动态调度和管理

基于GB/T 28181-2022标准实现各级平台间互联互通,两个不同的标准监控报警网络通过信令安全路由网关进行信令对接,支持的功能包括:注册、实时视音频点播、设备控制、报警事件通知和分发、设备信息查询、状态信息报送、历史视音频文件检索、历史视音频回放、历史视音频文件下载、网络校时、订阅和通知等。

三、 运行环境要求

通用硬件服务器/虚拟机,64位Linux环境

四、 远程配置管理

支持WEB远程配置管理功能,动态配置转码输出RTP数据包大小,视音频编码参数等,可设置网络客户端访问的视频流参数,设置为分主码流及子码流。主码流即相对码流值图像清晰度较高的码流,相对应的带宽要求也较高,子码流即相对码流值清晰度较低,但对带宽要求也较低。

五、 常规异常处理

支持服务内部常规异常处理功能。

六、 日志管理及定期自动清理

支持服务内部日志管理及定期自动清理功能。

七、 GB/T28181标准媒体流转换为WebRTC标准媒体流

支持不同分辨率/码率的GB/T28181标准媒体流转换为不同分辨率/码率的WebRTC标准媒体流,输出WebRTC标准媒体流视频编码格式至少支持H264,音频编码格式至少支持G711A。

八、 GPU视频转码

支持GPU视频转码,支持CPU/GPU视频转码能力自动检测适配

2.5 视频安全评测工具箱

2.5.1 概述

公共安全视频传输网和在其上运行的视频监控系统建设应符合国家相关法律法规、标准要求,按照分级、分域防护原则构建总体安全框架,网络安全保障设施应结合实际情况,参照信息系统安全等级保护三级或以上标准进行建设,实现网络综合安全管理。

建设视频安全评测工具箱,实现对视频设备接入认证、视频可信、视频加密等功能的整体评测,提供公安信息网与公安视频专网、公安视频专网与政府其他部门网络间的边界安全保障。

充分保证视频图像信息的接入安全,根据需接入的视频图像信息或摄像机的属性进行分类,设定对应的安全接入级别和安全措施,保证公安信息网、公安视频专网的运行安全。

2.5.2 总体要求

视频安全评测工具箱是针对视频设备采用的关键协议进行安全性评测的专用工具系统。应能够实现对视频设备基础信息自动采集识别,对视频设备及系统的相关协议进行自动检测与识别,对视频设备及系统采用的SIP、RTP、REST等关键协议实现的安全性进行评测,监控关键部件采用的协议是否安全,交互过程是否可以抵抗攻击,对视频设备及系统的安全漏洞进行评测等功能。

2.5.3 系统架构要求

视频安全评测工具箱应采用主动式扫描检测的方式实现,无需在被检测设备安装插件或代理程序,无需通过数据镜像抓捕分析。

2.5.4 功能模块

视频安全评测工具箱应至少包含视频设备基础信息识别、应用协议识别、关键协议实现安全性检测、信息查询统计及检测报表输出等功能模块。

视频设备基础信息识别

采用基于网络的主动扫描的方式,自动扫描采集被检测设备的设备品牌、类型(包括DVR、DVS、NVR、IPC等)、设备型号、序列号等基本信息。

应用协议识别

采用主动扫描方式,扫描并识别视频设备与系统所有对外开放的通信端口,并能够识别通信端口采用的应用协议类型。应支持视频设备和系统主要应用协议的准确识别。

关键协议实现安全性检测

支持对关键协议实现的安全性检测能力,能够快速准确的扫描并检测关键协议(SIP、RTP、REST、RTSP等)是否存在安全漏洞,协议交互过程是否存在身份认证、缓冲区溢出等方面的安全漏洞。

应支持各品牌设备专有安全漏洞、视频设备通用安全漏洞的安全检测,如身份认证绕过类漏洞、配置文件密码类泄露、Redis漏洞、零Day漏洞等。

应提供可选择的攻击性验证脚本能力,以便进行针对性的检测。

信息查询统计及检测报表输出

针对被评测设备及系统的各类采集及评测结果信息,应提供方便的查询、统计功能,能够生成评测结果报告,并支持多种格式的报告输出功能。

2.5.5 其他技术要求

平台要求

要求系统能够支持主流的Windows或Linux系统,应至少能够支持如下环境中部署:

操作系统:windows server 2008及以上

数据库:MS SQL Server 2008及以上

软件开发语言

系统基于常规C/C++/JAVA等语言开发。

客户端要求

客户端采用浏览器通过HTTPS访问和管理系统,无需安装其他插件及程序。

通信协议要求

要求系统采用HTTPS进行访问和管理。

开放性要求

要求系统提供对外标准的统一接口,方便与其他系统互连或集成。

扩展性要求

系统部署安装的硬件设备配置的升级不会引起系统软件的修改和开发。

系统应采用模块式设计,系统功能应易于扩展。

系统应具备数据库表和字段可扩展能力,以适应今后业务的变化和发展。

可维护性要求

系统设计、开发中要遵循易操作性、健壮性、实用性、高效性和安全性的原则。

用户界面提示信息通俗易懂,操作及选择键的功能定义在全系统保持一致。

系统应提供异常错误提示,能够直观反馈系统的运行状态,当出现运行异常时能够向用户反馈错误原因及解决方案。

2.5.6 性能、管理与安全

一、性能指标

设备基础信息识别要求支持海康威视、大华科技、天地伟业、宇视科技、科达科技、安讯士(AXIS)、亚安、博世、TP-LINK视频、D-LINK视频、Sanyo视频、TBK视频、景阳视频、WIFICAM、H3C视频、Foscam、雄迈科技、海芯威视、汉邦高科等国内外常见品牌的视频设备和系统。

应支持HTTP、HTTPS、FTP、TELNET、SSH、SIP、RTSP、RTP、REST、ONVIF、SNMP等应用协议的准确识别。

针对单台设备/系统的扫描周期不超过10分钟。

二、管理要求

管理安全

应具有登录用户身份鉴别机制,使用用户名和密码才能登录。

应对用户账户密码加密存储。

安全审计

应能对历史扫描任务数据(如扫描结果等)进行清理和删除,但可以保留扫描任务配置信息。

应具有安全审计功能,审计事项包括:

a. 用户登录和注销操作;

b. 软件升级操作;

c. 用户设置参数操作;

d. 扫描任务创建、启动、修改和删除操作;

e. 数据查询操作。

审计内容应包括执行操作的用户名、操作类型、远程访问样机并执行相关操作的设备IP、操作事件描述、操作时间等信息。

三、安全要求

口令信息不能在网络上明文传输。

应防止对资源的非授权使用和访问。

系统需对集成用户的身份、数据包和连接方式进行验证控制,防止对系统的非法访问、攻击和破坏。

系统应具备完备的系统容错、数据备份等系统可靠性措施,系统出现问题能保证数据的完整恢复。

2.6 视频安全评估系统

2.6.1 总体要求

通过对视频监控网络中的设备、系统、协议进行安全性评测,报告网络、设备及系统在配置、运行、协议实现等方面存在的各种安全漏洞,并对各类信息进行综合关联分析,生成安全评估报告。

2.6.2 系统架构与系统功能

一、系统架构要求

为方便安全评估工作的执行,部署在便携式设备中,通过方便的接入方式接入目标网络中,要求系统采用主动远程扫描检测的方式实现,不需要进行数据流量监听,不需要部署客户端等代理程序。

二、系统功能总体要求

视频安全评估系统应能够实现对视频网络中的存在的设备的种类、数量、分布情况进行自动采集,对视频网络中主要的应用服务类型进行检测与采集,对视频设备、视频系统的安全性进行评估,对视频系统主要应用服务类型及应用协议安全性进行评估,具备设备、服务、协议及安全漏洞的关联分析能力,根据采集的各类信息及检测的安全问题生成安全评估报告。

2.6.3 功能描述

1、 视频网络基础信息采集与识别

要求采用基于网络的远程主动扫描的方式实现。

能够扫描网络中存在的各种设备,并能够进行设备类型的自动识别和分类,设备类型至少包括视频设备、网络设备、应用服务设备、终端设备、安全运维设备等。

针对视频设备,能够自动采集设备的设备品牌、类型、型号、版本标识等基本信息。

针对终端设备、应用服务设备能够采集设备的操作系统类型等基本信息。

能够自动扫描采集各设备开放的端口及对应的应用协议类型。

13、 网络、设备及协议实现的安全性检测评估

支持视频类设备、视频系统、主要应用系统(含数据库、FTP、SSH、telnet等)的弱口令检测能力。

能够检测关键协议(SIP、RTP、REST、RTSP等)实现是否存在安全漏洞,协议交互过程是否存在身份认证、缓冲区溢出等方面的安全漏洞。

能够检测各品牌设备专有安全漏洞、视频系统主要应用(OpenSSL、OpenSSH、Tomcat Apache、Apache Struts2、Redis等)通用安全漏洞。

14、 信息查询统计及安全评估报告

提供扫描的网络、设备、系统、应用、漏洞等方面的分类查询、统计功能,各类信息能够生成报表。

提供针对检查项目的综合性分析,根据检测的项目及结果,采用科学的计算及评分方式,生成安全评估报告。

安全评估报告支持自定义模板,支持报告的导出为word、excel、pdf等格式功能。

2.6.4 其他技术要求

产品平台要求

系统能够支持主流的Windows或Linux系统,应至少能够支持如下环境中部署:

(1)操作系统:windows server 2008及以上

(2)数据库:MS SQL Server 2008及以上

软件开发语言

系统基于常规C/C++/JAVA等语言开发。

客户端要求

客户端采用浏览器通过HTTPS访问和管理系统,无需安装其他插件及程序。

通信协议要求

系统采用HTTPS进行访问和管理。

开放性要求

系统提供对外标准的统一接口,方便与其他系统互连或集成。

扩展性要求

系统部署安装的硬件设备配置的升级不会引起系统软件的修改和开发。

系统应采用模块式设计,系统功能应易于扩展。

系统应具备数据库表和字段可扩展能力,以适应今后业务的变化和发展

可维护性要求

系统设计、开发中要遵循易操作性、健壮性、实用性、高效性和安全性的原则。

用户界面提示信息通俗易懂,操作及选择键的功能定义在全系统保持一致。

系统应提供异常错误提示,能够直观反馈系统的运行状态,当出现运行异常时能够向用户反馈错误原因及解决方案。

系统具备持续稳定运行的能力。

2.6.5 性能、管理与安全

1、 性能指标要求

视频类设备识别和信息采集要求支持海康威视、大华科技、天地伟业、宇视科技、科达科技、博世、Foscam、雄迈科技、TP-LINK视频、D-LINK视频、Sanyo视频、TBK视频、景阳视频、安讯士(AXIS)、WIFICAM、H3C视频、亚安、海芯威视、汉邦高科等国内外常见品牌的视频设备和系统。

(1)支持HTTP、HTTPS、FTP、TELNET、SSH、SIP、RTSP、RTP、REST、ONVIF、SNMP等应用协议的准确识别,支持对HTTPS、FTP、TELNET、SSH、SIP、RTSP、RTP、REST、ONVIF等协议实现的安全性检测能力。

(2)支持对主要操作系统(windows、Linux、Unix等)的类型及版本的识别。

(3)支持主流网络设备品牌的识别及信息采集,至少包括CISCO、华为、H3C、锐捷、3Com、迈普等。

(4)系统采用主动扫描方式实现,单套系统能够扫描超过5万点设备网络的能力;

(5)系统支持多个B类IP地址范围的并发扫描,并发扫描的B类地址数量不低于15个。

(6)系统扫描时网络带宽平均占用<5Mbps。

15、 管理要求

(1)管理安全

应具有登录用户身份鉴别机制,使用用户名和密码才能登录。

应对用户账户密码加密存储。

(2)安全审计

应能对历史扫描任务数据(如扫描结果等)进行清理和删除,但可以保留扫描任务配置信息。

应具有安全审计功能,审计事项包括:

a. 用户登录和注销操作;

b. 软件升级操作;

c. 用户设置参数操作;

d. 扫描任务创建、启动、修改和删除操作;

e. 数据查询操作。

审计内容应包括执行操作的用户名、操作类型、远程访问样机并执行相关操作的设备IP、操作事件描述、操作时间等信息。

16、 安全要求

(1)口令信息不能在网络上明文传输。

(2)应防止对资源的非授权使用和访问。

(3)系统需对集成用户的身份、数据包和连接方式进行验证控制,防止对系统的非法访问、攻击和破坏。

(4)系统应具备完备的系统容错、数据备份等系统可靠性措施,系统出现问题能保证数据的完整恢复。

2.7 视频安全性能测试系统

2.7.1 总体要求

对SM1、SM2、SM3、SM4算法性能的评测。对设备接入认证网关、用户认证网关、视频密钥管理服务设备容量、并发、时延等方面的测试。

1、 算法测试

对SM1、SM2、SM3、SM4算法性能进行测试

17、 容量测试

对设备接入认证网关、用户认证网关、视频密钥管理服务设备容量方面的测试,可接入认证的设备数量、用户数量、可管理的密钥总数等

18、 并发测试

对设备接入认证网关、用户认证网关、视频密钥管理服务设备并发性能的测试,可支撑的并发设备注册认证数量、并发访问用户认证数量、并发密钥访问数量等

19、 时延测试

对设备接入认证网关、用户认证网关、视频密钥管理服务设备访问时间测试。

2.7.2 平台技术要求

平台要求

系统能够支持主流的Windows或Linux系统,应至少能够支持如下环境中部署:

操作系统:windows server 2008及以上

数据库:MS SQL Server 2008及以上

软件开发语言

系统基于常规C/C++/JAVA等语言开发

客户端要求

客户端采用浏览器通过HTTP访问和管理系统

通信协议要求

要求系统采用HTTP进行访问和管理

开放性要求

要求系统提供对外标准的统一接口,方便与其他系统互连或集成

扩展性要求

系统部署安装的硬件设备配置的升级不会引起系统软件的修改和开发

系统应采用模块式设计,系统功能应易于扩展

可维护性要求

系统设计、开发中要遵循易操作性、健壮性、实用性、高效性和安全性的原则。

用户界面提示信息通俗易懂,操作及选择键的功能定义在全系统保持一致。

系统应提供异常错误提示,能够直观反馈系统的运行状态,当出现运行异常时能够向用户反馈错误原因及解决方案。

系统具备持续稳定运行的能力。

2.7.3 管理与安全

管理安全

应具有登录用户身份鉴别机制,使用用户名和密码才能登录。

应对用户账户密码加密存储。

安全审计

应具有安全审计功能,审计事项包括:

a. 用户登录和注销操作;

b. 软件升级操作;

c. 用户设置参数操作;

e. 数据查询操作。

安全要求

口令信息不能在网络上明文传输。

应防止对资源的非授权使用和访问。

系统应具备完备的系统容错、数据备份等系统可靠性措施,系统出现问题能保证数据的完整恢复。

2.8 视频共享管理平台软件

2.8.1 平台概述

视频共享管理平台将接入治安监控图像资源、智能交通图像资源,实现卡口、电子警察设备、高清监控点、标清监控点的各类监控前端的综合接入。

视频共享平台部署于公安视频专网,设计完全遵循GB/T 28181-2016技术标准,满足管理平台的监控管理、报警管理、存储管理、GIS/电子地图管理、集成业务管理、网络与设备管理、用户管理、日志管理、人机交互、移动/无线监控业务,并针对项目建设需要部署解码上墙和图片管理相关服务,有效提升平台整体功能应用。

2.8.2 多级互联

支持通过GB/T 28181-2016实现多级平台之间的互联。

支持对于获取视频资源的数据质量治理。

支持对于媒体流的转发与分发。

2.8.3 社会面视频接入

支持通过互联网接入和管理异构互联网视频系统,根据权限获取异构互联网视频系统内的视频点位资源等。

兼容支持GB/T28181-2016以及GB/T25724国家标准,支持GB/T28181标准视频系统接入和管理,并对外提供实时点播、录像回放/下载等GB/T28181标准接口服务;支持接入和管理符合GB/T25724标准的前端视频监控设备。

兼容支持ONVIF标准视频系统接入和管理,根据权限获取ONVIF标准视频系统内的视频点位资源等进行实时点播等操作

兼容支持海康萤石等第三方私有协议互联网视频系统的接入和管理,根据权限获取第三方私有协议视频系统内的视频点位资源等进行实时点播等操作。

支持对接入的异构互联网视频系统内的视频点位资源进行实时点播、录像回放/下载等操作。

支持对接入的异构互联网视频系统内的视频点位视音频进行实时视音频格式转码,转换为GB/T28181-2016标准媒体流格式,为平台实时点播、录像回放/下载等业务提供流媒体服务。

2.8.4 共享应用设计

1、 实时图像点播

能按照指定设备、指定通道进行图像的实时点播,支持点播图像的显示、缩放、抓拍和录像,支持多用户对同一图像资源的同时点播。

20、 远程控制功能

能通过操作可对前端设备的各种动作进行遥控;能设定控制优先级,对级别高的用户请求应有相应措施保证优先响应。

21、 图像检索回放

能按照指定设备、通道、时间、报警信息等要素检索历史图像资料并回放和下载;回放应支持正常播放、快速播放、慢速播放、进退、画面暂停、图像抓拍等、录像切换播放。

22、 移动视频监控

平台可支持手机移动视频监控应用,通过安全网闸实现视频专网与移动互联网的安全隔离,并且为移动互联网上的手机移动终端提供移动视频监控的功能,比如实时视频点播,云镜操控,本地抓拍,录像等。

23、 语音对讲功能

通过监控客户端,可以选择任意一台监控设备发起语音对讲;可以选择多种语音对讲格式,匹配不同设备的对讲协议,提升对讲效果。

24、 地图应用功能

视频监控系统对GIS的传统应用,主要体现在设备的标注,包括监控设备、存储设备、卡口设备、报警设备和各类传感器等。通过GIS标注,可以把视频系统的相关操作转移到GIS中展现,同时,根据高内聚、低耦合的原则,规范双方调用接口。随着系统的发展,公安实战中的相关业务,如应急指挥、安保巡检等,也希望通过挂图作战的方式实现。下面,从标注、基础应用、移动、特色功能等几个方面介绍相关应用。

(1)“一张图”集成展示

视频监控、卡口、电子警察、警车、移动单兵、社会资源等均能够在电子地图中上显示设备类型、状态、位置都能直观的显示。如下图所示,监控视频和卡口分别用不同的图标显示;设备是否在线,也用不同的颜色标注;结合电子地图,利用设备的位置坐标信息,能直观的了解设备的位置。如果出现报警信息,也会在电子地图中相应的报警位置来显示,报警信息一目了然。

(2)快捷定位

往往视频监控、卡口数以千计,在如此庞大的数量面前,如何快速准确的找到自己需要的监控录像,成为一个难题。平台提供多种方式,能够快捷的定位到用户所需要的监控视频,大大提高了寻找目标设备的效率。

(3)首页导航

通过电子地图的首页,可以清晰选择不同类型的监控,也可以通过建筑物的搜寻来找到附近的监控点位。在选择了监控类型之后,还能够通过进一步的细分,如设备类型、组织接口、监控类别等,来进一步缩小范围。

(4)视野内搜索

在确定了案发现场,只需要搜索指定区域内的视频、卡口资源,可以直接从电子地图中找到相应的区域范围,然后通过视野内搜索功能,找寻在地图所示范围内的点位。同样,也可以通过类型选择和模糊搜索来缩小范围,精确搜索。

(5)自主定位

如果对某个区域非常熟悉,可以直接在地图中找到某个位置,通过地图工具、放大、缩小和移动地图,也可以用鼠标拖曳,滚轮放大缩小等操作,来定位某个具体地点。例如用户知道某大街与某某路交叉口有个监控点位,可以直接找到该交叉口,定位到该监控摄像。

(6)一站式操作

平台提供一站式操作服务体验:所有的监控点位、卡口、社会资源、报警信息都能在电子地图上进行实时视频点播、控制、光圈调整、聚焦变倍、鼠标模拟、三维定位、录像下载、解码上墙、设备保修等一站式的操作,极大的提升系统的易用性。

(7)基本信息

在电子地图上点击设备图标,即能够显示该设备的基本信息,包括通道名称、资产厂商、资产类型、资产型号、所属组织、监控类别等实用信息,并提供画面快照。

(8)实时视频点播

在电子地图点击实时视频图标,支持视频设备的实时视频点播、球机和云台的控制、摄像机光圈放大缩小、聚焦扩焦、放大缩小、三维定位、鼠标模拟等操作,并且在实时视频界面通过快捷菜单,可实现本地录像、语音对讲、抓图、音频等快捷操作,极大的提升易用性。

当用户使用球机时,可点击“鼠标模拟”按钮,实时视频界面会出现9个快捷按钮,点击按钮,球机即时转向所指方向,同时在画面鼠标所点位置会出现一个快捷箭头,点击鼠标左键,球机云台即跟随快捷键头的指向转动,为用户操控球机提供极大便利。

(9)录像回放

在电子地图点击录像回放图标,支持该通道录像的搜索与播放。支持根据日期来对设备录像和中心录像进行搜索,而且支持1/8倍速~8倍速播放和逐帧播放,办案民警可以根据需要选择不同的速率进行浏览。在发现有价值的视频片段,可以通过快捷菜单中的录像功能,将视频片段保留在本地。

(10)解码上墙

在电子地图点击视频上墙图标,可以选择电视墙和视频通道,将视频上墙显示。也可以把当前通道的显示保存为任务,下次只需要启动任务,免去每个视频添加上墙等初始设置。

(11)地图报修

在电子地图点击一键维护图标,可以方便的进行报修,能使运维人员第一时间了解到设备的故障信息。

(12)报警信息

在电子地图点击报警信息图标,可以搜索查看该通道的历史报警信息。

(13)周边搜索

关联搜索可以查找某个监控点位周围其他的视频点位。

(14)视频多选

实际应用中,往往需要查看多个监控的图像,一个一个选择费时费力,效率低下。平台提供了多种选择方式,能将相关联的监控点位同时选取,对选取的所有摄像头能够同时打开实时画面,调取录像或解码上墙等操作。

(15)线选应用

如果了解嫌疑人或车的具体路径,想调取路径上的摄像头画面或者录像,使用线选功能,画出想要查找的路径,即可得到在嫌疑人或车经过路径上所有监控。通过监控实时画面,调取分析录像来获取线索,侦破案件。

(16)框选圈选

如果已经知道嫌疑人的落脚点,或者作案范围,通过框选或者圈选将某个范围内的摄像头全部选定,即可得到在嫌疑人落脚点或作案范围内所有监控。通过监控实时画面,调取分析录像来获取线索,侦破案件。

(17)可视域应用

平台支持可视域应用,将摄像头所覆盖的监控范围显示在地图上,并将实时画面在小窗口中展现。并且通过拖拉可视域范围,可以实现对球机的云台控制,不仅可以转动,而且可以放大缩小,使用户更方面快捷的调整到自己想要的视角。

(18)报警定位

为了能快速找到报警点位,可以通过电子地图中报警点位的功能,快速搜索和定位发生报警的监控。有利于监控中心及时作出应对措施。

(19)警卫巡逻

警卫巡逻功能可以制作摄像头巡逻预案,将预先选定的摄像头按顺序快速切换,无需多次选择。在执行保障任务和领导人出访任务时,将保障区域,或者领导人出访的线路中的摄像头设置警卫巡逻任务,就可以随时锁定目标区域,通过上下方向键,就能快速切换监控点位。

(20)地图工具

平台电子地图提供了方便的工具,帮助用户更好地利用电子地图。

图层显示

某个区域的设备很多,在地图中层层叠叠无法辨认。图层显示功能可以筛选地图上的设备资源。只要选择自己需要的设备类型,是地图显示更简洁清晰。

地图测绘

在办案过程中,需要对实地的距离、面积做测绘,也需要标记一些线索、资源信息。平台提供了一些简单易用的测绘工具,帮助办案民警对案发现场进行研判,信息收集。

全屏显示

平台提供全屏功能,可以通过全屏显示更多地图内容。

25、 卡口业务功能

通过与卡口监控服务的互通整合,业务系统可提供卡口实时监视功能,包括:

支持对道路路口等进行监视并显示经过车辆的实时信息;

支持显示当前路口的示意图和经过车辆记录的详细信息查看功能;

支持地图上小窗口实时显示卡口过车信息及图片并能提供全屏功能;

(1)布控报警

各地用户通过管理平台对其所在区域具有布控管理权限,可进行嫌疑车辆、违法车辆、涉案车辆的布控比对。可在本域范围内布控。也可向上级单位申请跨区域布控。允许进行模糊布控和精确布控,模糊布控即对车辆号牌信息不全的车辆亦可实现布控。

系统在前端卡口采集车辆信息与黑名单数据库中布控车辆信息比对成功时,可根据用户设置选择发出多级报警信号。

(2)综合查询

系统提供多种查询功能,包括过往车辆、超速车辆、违法车辆、布控车辆、异常牌照车辆查询等,并可对查询数据结果进行导出。

(3)视频回放联动

用户在查询过车记录后,可以在检索结果列表中选择一条卡口记录并点击视频回放按钮,系统会在左屏自动进行卡口设备定位以及包围圈选择附近视频设备,并自动设置视频回放时间段进行视频回放。

(4)车辆轨迹回放

用户在进行指定车辆卡口信息检索后,系统会自动将车辆卡口信息按时间顺序排列并显示在检索结果列表中,用户在检索结果列表中点击任意条记录,系统会在左屏电子地图上将用户选择记录及之前的该车辆记录进行定位和标号,并进行轨迹显示。

26、 系统管理功能

组织机构:可以定义,增加,修改以及删除组织树上的若干级组织机构,可以增加子机构以及所辖的前端设备、监控终端、用户。管理员可根据组织机构的类型的不同添加不同类型的二级机构。

角色管理:可以定义,修改,删除具体角色及其权限,可定义若干角色为系统权限、包含权限和排除权限。可根据不同的用户权限需要进行不同的授权。

系统权限:用于定义角色为特定的某些功能权限的集合,包含权限用于定义角色对于某些设备资源具有访问权,排除权限用于定义角色对于某些设备资源不具有访问权。

用户管理:可在相对应的机构下面增加一个用户,可以对用户的信息进行描述,包括云台的控制级别,手机,邮箱,用户名的有效时间,和是否停用或启用。对添加的用户可以进行修改,删除,角色关联,级联设置,及用户查询。

报表与日志管理

统计报表:支持统计某个时刻所有在线用户的信息,包括用户名、登录的IP地址、登录的时间和所属的机构等。支持对所有的设备和通道按照所在的机构进行统计,包括设备总数、通道总数和已经启用的通道数量等,可以生成报表并导出。

系统日志:用户可搜索查询用户访问操作日志,包括日志来源、等级、操作用户、操作者IP地址和具体的操作内容,设备所属的组织、设备的名称、访问的端口、具体操作内容和操作结果等,可以生成报表并导出。

用户可查询统计最近一次设备状态巡检的统计日志。

用户可查询检索任何一级机构下的报警信息记录,可以按照报警源、报警等级、报警类型和报警时间组合查询,可以生成报表并导出。

设备管理

设备管理:支持添加IP摄像头、数字化编码设备和报警设备,添加设备时需选择设备类型、设备型号、生产厂家、联系人、联系电话、购买日期、保修期限等信息;可远程设置设备参数,可设置的内容决定于设备厂商SDK的支持。

流媒体管理:可以配置流媒体服务设备转发参数,系统管理平台可设置若干个流媒体服务,每个流媒体服务需设置服务名称、IP地址、端口、所关联的客户端IP段、最大带宽参数;系统通过判断客户端软件所属的IP地址范围和访问的视频图像的不同,自动通过某个流媒体服务设备转发,并且可指定用户可使用的最大并发连接数和带宽。

设备校时管理:各级节点的管理平台、前端设备之间可进行手动或者自动的时钟同步。

远程重启:支持管理员通过软件远程手动重启指定前端设备。

远程升级:支持远程在线升级前端设备软件。

系统管理

视频设置:可设置网络客户端访问的视频流参数,设置为分主码流及子码流。主码流即相对码流值图像清晰度较高的码流,相对应的带宽要求也较高,子码流即相对码流值清晰度较低,但对带宽要求也较低。

级联设置:在多个平台构造的环境中,需要系统级联时,可在级联设置功能中指定上下级别关系即可实现系统级联。

菜单设置:自定义系统菜单,增加、编辑修改和删除菜单,可以输入自定义菜单的名称、菜单图标、定义菜单执行的动作包括URL链接,选择菜单的等级。

任务计划:显示当前任务计划的执行情况,定义一个新的任务计划,可以输入任务计划的名称、内容描述,选择任务计划的类型,包括校时、布撤防、备份和删除日志、设备巡检、预置位、快球巡航、数据和信息同步等,还可以按照用户的需求开发定制一些新的类型。

报警管理

报警类型管理:对报警防区和类型进行定义,包括防区代码、名称、电话、类型、位置、地址和安装时间等信息。支持创建多种报警信号输入,并可由用户定义名称和用途。

报警输出管理:报警联动输出管理可设置报警信息类型和报警信息触发的行为之间的关联功能。报警输出包括视频弹出、录像、灯光开关、云台预置位、电子地图弹出、语音对讲、警铃、报警短信、报警彩信等内容。

报警联动管理:报警联动输出管理可设置报警输入信息类型和报警信息触发的行为之间的关联功能。

地图管理

支持用户自定义多级电子地图,在各级电子地图上布置监控、报警点,报警时在地图上显示报警位置,可以通过地图上监控点和报警点的图标链接来直接定位到相应的视频图像窗口。

视频GIS联动

结合GIS系统实现事件现场精确定位,提供准确的地理位置信息,提高对应急事件的响应能力及速度。可在地图上定位摄像机,并可直接打开摄像机的实时图像;对摄像机进行模糊查找,并能自动打开视频图像;报警地点能够自动在地图上予以显示;在地图上可以显示各种警情统计数据。融合GIS矢量地图、报警信息、事件汇总、视频图像、设备状态、位置分布等信息于一体,直观显示多种信息及资源汇总,并支持标准格式的图片文件直接导入(BMP/JPEG/AutoCAD等)到系统平台之中。

2.9 视频运维管理子系统

2.9.1 系统概述

随着视频监控系统的持续发展,无论是设备种类和数量,都日趋繁杂和庞大。如此规模的系统,如何保障安全运行,给运维带来了新的机遇和挑战。传统的人工运维,效率比较低,服务质量无从考量,规范流程也比较粗放,很难知晓系统的可用率和稳定性。很多系统建设完后没有有效发挥作用,如何提高系统的使用效率是业主单位在建设前后非常关注的问题。

视频运维管理子系统,立足于安防行业视频监控领域,采用智能分析、故障检测和工作流引擎等技术,整合了视频质量诊断、录像检查和设备状态检测等功能,通过故障联动报警、故障流转处理、统计报表等贴合用户业务的功能,达到无人值守、规范管理、量化考核的目标,从而最大程度的减少视频监控系统运维的人力成本,提高运行维护水平,保障系统安全可靠运行。

2.9.2 系统架构设计

智能运维管理平台,基于SOA思想开发的全新平台系统。包含:业务集成子系统,IT综合网管子系统,视频诊断子系统、工作流子系统,报表子系统。

视频监控建设的过程中,前端的监控点数量,从几百个、几千个到上万个,对运维系统的要求也不断的提高,现有的运行维护方式,无法满足不断增长的设备维护需求。

需要从视频联网建设入手到加强图像信息资源的综合开发利用和维护管理,开展视频监控系统联网建设、系统视频图像故障诊断技术、视频图像信息整合与共享技术,在保障视频图像优质有效监控管理的同时,有效保障视频图像的管理与维护,实现图像故障自动报警和一般性故障自我修复功能,使视频监控系统像各种查询系统一样成为全警使用的系统,将视频监控技术打造成为各部门、警种使用的重要技术支撑,全面服务于公安工作的各项业务。

系统整体采用三层系统结构数据采集层、数据处理层、数据展现层。监控对象数据包括:性能数据、告警数据、部分配置数据等。支持运维管理系统级联,实现日常巡检任务;通过巡检调度任务和复核比对,提供分级的考核任务管理,联网平台发生异常后,通过运维管理系统下发通知。

业务集成:为客户提供便捷的可视化操作和展示,将资源管理、监控展示、报警处理、视频诊断、统计报表等功能进行整合处理,可集成第三方子系统。

网管:实现设备接入、业务巡检、报警处理功能,为运维系统提供基础数据。

工作流:基于JBPM流程引擎开发的提供规范化、流程化的运维保修处理方案。

报表:提供精细化的业务报表,为客户提供分析、决策的基础数据。

视频诊断:结合智能算法诊断图像质量,确保系统健康运行。

2.9.3 系统功能

一、网络综合管理

目前,网络管理越来越重要,它是业务连续性、系统整合、应用服务的基础。复杂异构的网络环境给管理工作提出了巨大的挑战。各种品牌的网络设备、各种网络连接关系等如果没有有效管理措施,来电响应式的管理根本无法满足业务发展的需要。这就可以借助管理系统实现对IT的治理。另外,管理系统为投资决策提供量化依据。

IT综合网管子系统对设备、平台、性能、安全等管理范畴,通过首页概览、拓扑展现、地图展现、一键运维等管理手段,实现了客户复杂网络环境透明化、事前、无人职守管理,给客户决策提供依据,达到高效管理目的。

1.可视化展现

通过该界面功能,可以方便用户快速直观的了解重要监控数据;该功能适合在领导指导和审查系统时,进行领导演示及整体展现。

(1) 通过四幅面板,提供摄像机在线统计图、超时报修单统计图、中心机房拓扑图、组织结构图相关情况查询;

(2) 通过区域维度角度,对摄像机在线统计图进行汇总,形成柱状图展现;

(3) 通过报修时间段角度,对超时报修单统计图进行汇总,形成柱状图展现;

(4) 查看摄像机在线统计图、超时报修单统计图的详细,可以实现摄像头状态、设备报修情况的统计明细;

(5) 中心机房设备进行拓扑图显示(服务器、交换机、路由器),从全局的角度出发,帮助运维管理人员实时了解整个网络当前的运行状况,通过预警和设置,提示网络中存在的各种情况和状态;

(6) 有效显示主控视频监控系统上下级两次组织关系图;

(7) 提供用户自定义配置显示设备、组织关系的功能

2.一键运维

为了提高对重点设备和平台的运维管理效力,我们开发了一键运维功能;通过查看各设备的相关信息,了解最新设备状况及报修情况;在该功能中只要选中相关设备,就能进行快速的报修流程,改变以往花费大量时间去查询异常设备在进行报修的繁琐工作。

(1) 对所有的异常状态列表(摄像机、卡口相机、编码器、存储设备、网络设备、矩阵设备、智能设备)全部迁移过来;

(8) 排列分区块显示所有异常类型的列表,可以看视频,由于区块较多,支持右侧滚动滑块,每个区块内部分页显示;

(9) 支持一键导出所有异常信息,导出结果为excel表格,按区块导出到不同的sheet表中;

(10) 实现对摄像机和卡口相机状态的一键报修。

3.资产状态

通过资源状态管理实现对摄像机、录像、卡口相机、编码器、存储设备、网络设备、矩阵设备、智能设备、平台、硬件服务器等资源信息、状态采集信息的管理。以及可视化展现,同时实现一键报修、诊断管理。

(1) 实现对用户单位部署在前端摄像机运行情况进行监控;同时对摄像机获取的视频数据进行诊断,给出有效的诊断分析(根据视频诊断规范标准体系);为了方便运维人员的工作效率,可选中对于的设备,进行一键报修处理。

(11) 实现对用户单位部署在前端录像机运行情况进行监控;同时以一天(24小时)作为监控周期,以小时作为最小力度,进行24等分的录像情况进行异常管理。保障用户方对录像丢失情况进行高效规范化。

(12) 实现对用户单位部署在前端卡口相机运行情况进行监控,通过对卡口相机运行情况的分析,衍生出车检器/线圈的整体状态;为用户方进行警力调控提供参考依据。

(13) 实现对用户单位部署在内部的编码器运行情况进行监控,当获取异常报警时,进行及时有效的运维。

(14) 实现对用户单位部署在内部的存储设备运行情况进行监控,当获取异常报警时,进行及时有效的运维。

(15) 实现对用户单位部署在内部的网络设备运行情况进行监控,当获取异常报警时,进行及时有效的运维。

(16) 实现对用户单位部署在内部的矩阵设备运行情况进行监控,当获取异常报警时,进行及时有效的运维。

(17) 实现对用户单位部署在内部的智能设备运行情况进行监控,当获取异常报警时,进行及时有效的运维。

(18) 实现对用户单位已经部署在线的平台(联网共享平台、实战图侦平台)等进行有效运行监控;实现对平台各类业务进程、IP管控、视频数据交互等情况进行统一管理。

(19) 实现对用户单位部署在内部的硬件服务器运行情况进行监控,当获取异常报警时,进行及时有效的运维。

4.地图展现

智能运维管平台支持多种地图类型,包括超图,pgis,谷歌在线,谷歌离线,天地图,arcgis等,可以实现与公安局警用地理信息系统进行无缝对接。

该平台支持以地图可视化的形式显示设备,支持在地图上查询已部署的摄像机和卡口,并可以对当前摄像机执行实时预览、录像回放、设备报修、疑难点位管理和查看历史报修的概况。

(1) 进入地图功能模块,用户可以通过摄像机、卡口不同分类,综合查询所属设备在地图上的整体部署位置;同时可以选择不同图层进行设备展现;

(20) 可以进一步通过筛选条件(设备类型、组织结构、监控类别)或关键字搜索,进行相关设备的查询,选中设备在地图上高亮定位展现;

(21) 在地图上选中定位的设备,进行该设备详细说明情况查询;

(22) 通过对地图定位设备信息查看的同时,还提供有效便捷的设备管理,包括视频打开、录像回放、设备保修、疑难点位管理和查看历史报修的概况。

5.数据接入

支持通过GB28181协议从视频图像监控平台获取前端设备资源(相关接口参考GB28181资源查询获取接口),并对视频码流进行分析诊断;

支持通过SDK从非国标平台获取前端设备的资源,并对视频码流进行分析诊断;

支持通过SDK获取非国标标准前端设备的资源,并对视频码流进行分析诊断;

支持前端设备视频流检测、通断检测、录像状态检测

二、运维管理子系统

运维流程管理系统作为综合运维平台的重要组成部分,支持组织机构定义及其管理、权限管理、数据流管理等等。它也是实现综合运维管理平台的核心。

用户实施运维流程管理系统,有助于进行完善的服务管理。在各个流程管理中,可以直接与各个业务部门相互作用,做到快速响应,合理整合各部门资源,从而实现对业务功能及流程的重新设计,降低成本、缩短周转时间、提高质量和增进客户满意度。客观上为用户带来经济及社会效益。

1.故障管理

实现用户方对系统中已经登记的故障类型相关信息查询;同时结合业务变化及异常情况的多样性,灵活添加需要补充的新故障信息。

查询已登记故障类型信息,包括故障类型、故障描述说明等;

提供故障管理功能,包括故障信息修改、删除故障记录;

便捷方便提供对异常问题中遇到的新故障进行新增,在不断丰富故障信息库的同时,为运维管理人员在以后的维护工作中,形成问题登记的知识库。

2.报警管理

系统针对网络管理,提供了全面的报警功能,包括:网络连通性、设备负载、TCP告警、端口状态以及流量、线路状态以及流量、设备日志信息、设备配置变动、SNMP连通性等。通过系统智能主动的报警方式,可以使值班人员立刻对机房设备运行情况掌握,而不用在被动的去查找可能出现的问题。

管理系统中的报警信息,并通过数据列表、统计图形及操作接口等方式进行展示和业务交互。系统根据阈值或管理规则对各设备上报的报警信息进行处理,然后产生报警。

报警管理功能主要包括报警采集和过滤、报警入库、报警联动、报警确认与转发、报警查询统计、报警配置管理等。系统通过图形用户界面展示报警信息,并通过丰富的业务接口提供报警相关的处理功能。

智能运维管理系统提供报警管理功能,能接收和存储被管理设备的报警信息。您可以在运维系统上对存储的报警信息进行处理和转发。报警管理包括实时报警和历史报警。

3.保修管理

平台提供相关人员进行设备报修情况录入、跟踪、问题流转、结果反馈等流程管理,同时提供业务人员可以通过疑难点位的查询列表,查看重点设备相关的故障信息

智能运维管理系统支持对出故障的设备进行报修管理;

由报修维护人员填写报修单据,并由报修审核人员对报修单据进行审核。

4.流程管理

报修流程电子化管理,保证维护的规范和有效,将传统运维工作流程化,流程自动流转至相应的维修部门处理,维修部门可以通过进入网站处理单据,上传点位故障原因的照片。

(1) 支持定制化流程裁剪;

(23) 支持流程上传附件;

(24) 支持工单Applet,Flash打印,导出PDF,WORD;

(25) 支持工单根据设备维修单位自动派发相应维修人员;

(26) 支持查看工单的流转详情;

(27) 支持查看点位的历史维修工单;

(28) 支持工单界面查看点位实时视频确认故障;

(29) 支持工单维修评价

三、视频诊断管理子系统

视频诊断管理系统是一种智能化视频故障分析与预警技术。它通过对图像的分析与处理,对由于人为或物理因素而导致的视频图像异常状况,进行诊断并发出报警,以提醒用户与相关维护人员注意,以保障系统的正常运行。该系统采用先进的计算机视觉算法,能够对常见摄像机故障做出准确判断并发出报警信息。

视频质量诊断是直接依据视频图像特征来分析视频故障,无需添加其他设备,也不破坏现有设备,能兼容各种类型的视频输入和传输设备,是一种对现有系统的无损探测。它是一种基于计算机视觉算法的视频分析方法,模拟人的视觉特性,检测到的故障以及故障严重程度与人的主观感受一致,可替代以往由人工完成的视频故障巡检工作。所有视频故障检测结果都将被储存于数据库,并统计分析监控系统的故障数、故障率等情况,极大地方便了对大型视频监控系统的维护和管理工作。由此可见,视频质量诊断对视频监控系统有着重要的意义,具有非常广阔的应用前景。

1、 诊断方案管理

系统支持各类视频异常的诊断,并提供增、删、改、查管理及分页显示功能;

亮度分析:对视频亮度进行量化分析,对亮度过高的情况进行报警;

清晰度分析:对视频清晰度进行量化分析,对视频模糊的情况进行报警;

颜色分析:对视频颜色进行量化分析,对视频偏色的情况进行报警;

噪声分析:对视频中噪声幅度进行量化分析,对视频中噪声过大的情况进行报警;

条纹检测:对视频中条纹进行检测,对视频中出现的较严重条纹进行报警;

抖动检测:对视频抖动情况进行监测,并对抖动幅度进行量化分析;

视频丢失检测:对视频丢失状态进行监控,出现视频丢失时进行统计报警;

低对比度:对视频对比度进行检测,对出现的低对比度异常现象进行报警;

视频丢失、视频冻结、视频遮挡和场景变化检测响应时间:<3秒

27、 诊断预案管理

实时对所有视频进行智能诊断,发现异常,立即报警,大幅缩短系统故障检测与受理时长与故障持续时长。

(1) 提供对系统中已经配置的预案进行列表查询,用户方可以清楚的了解所有预案的情况;

(30) 可以对已经添加的预案进行维护,包括预案详情查询、编辑、禁用、删除;

(31) 进行预案添加,包括基本配置情况(预案名称、停留时间、诊断设备、诊断方案、开始诊断时间、相关描述)等信息;根据目录树结构对通道信息进行选择配置;最后完成预案添加的整个流程;

(32) 平台提供一键配置功能,可以快速进行预算配置;通过平台可以对选择的设备进行诊断相关信息配置,包括什么时候开始诊断,诊断时间多长,通过什么方案进行等。

四、报表管理子分析

系统提供各种运行分析和性能报告,管理人员能根据这些报告准确评估整个视频监控网络的运行状况,及早发现故障隐患和评估威胁,为视频监控网络的决策提供参考依据。

1.设备故障次数统计

结合报修业务根据相关查询条件统计设备报修情况;

可按照组织结构筛选,选择时间范围及输入维修次数后,点击查询可以统计出该时间段内所选组织及其下级所有进行过报修设备的情况;

包括字段为:所属组织、设备名称、维修次数、最后一次维修时间;

报表页尾:统计、审核、时间、制表时间等信息

2.设备故障维修及时率统计

结合报修业务按组织汇总维修数及处理是否及时等情况;

可按照组织结构筛选,选择时间范围及及时天数后,点击查询可以统计出该时间段内;所选组织及其下级报修故障总数及处理的情况;

包括字段为:所属组织、故障总数、按时处理量、及时率;

报表页尾:统计、审核、时间、制表时间等信息

3.摄像机实时在线统计

按区域统计其下级点位的在线情况;

可按照组织结构筛选,统计其下级组织各点位在线情况;

包括字段为:区域、摄像头总数、在线情况(在线数、离线数)、离线历时(1小时内、1-4小时、4-24小时、24小时以上)、在线率、备注;

报表页尾:统计、审核、时间、制表时间等信息。

4.摄像机历史在线统计

用于统计点位的在线率,此报表可以用于考核运营商或者维护单位,作为每月租赁费用或者维护费用结算的参考依据;

可按照组织结构筛选,统计其下级组织各点位在线情况;

包括字段为:区域、摄像头总数、在线情况(在线数、离线数)、离线历时(1小时内、1-4小时、4-24小时、24小时以上)、在线率、备注;

报表页尾:统计、审核、时间、制表时间等信息。

5.视频质量统计

用于统计视频质量诊断中各点位诊断情况及质量达标率;

可按照组织结构筛选,对其下级组织中各点位数及在线数进行汇总,同时结合视频质量诊断,统计异常情况,计算出该组织的定位质量达标率;

包括字段为:区域、摄像头总数、视频质量异常个数 (在线数、清晰度、亮度、对比度、视频遮挡、视频抖动、视频冻结、视频丢失、噪声、场景变化、条纹、偏色)、质量达标率、备注;

报表页尾:统计、审核、时间、制表时间等信息。

6.设备报警统计

对各个组织发生的报警按设备报警类型进行统计

可按照组织结构筛选,选择时间范围后,点击查询统计出该组织及其子组织各报警类型报警数;

包括字段为:所属组织、视频遮挡报警数、硬盘故障报警数、网络故障报警数。

报表页尾:统计、审核、时间、制表时间等信息

7.考核管理

支持对联网平台/共享平台的稳定性进行检查考核,可查看平台离线考核成绩并支持统计显示各地市本月平台离线时长图形化展示。

查看最新一轮联网数量考核成绩。

支持实现联网质量考核任务并查看任务完成后的各地联网质量考核成绩和结果信息。

支持重点指挥图像考核,查看每轮重点指挥考核成绩,并给出详细考核结果。

五、配置管理子系统

1.平台配置

智能运维管理系统支持与平台对接,同步平台的组织结构和设备信息并进行显示和管理。

智能运维管理系统支持添加一个主平台和多个辅平台;

与平台对接后,智能运维管理系统实时获取平台状态

提供用户方对已配平台基本信息的查询

2.设备配置

提供用户进行编码器、矩阵设备、智能设备、卡口设备、网络设备、IPSAN设备等管理。

增删改查,增加填写的信息待补充;

支持批量导入,提供导入模板;

支持多类设备管理(智能设备、存储设备、网络设备、服务器等);

设备显示跟随左边的组织树变化

3.维修单位配置

对维修单位进行信息录入、维护等管理;

通过显示跟随左边的组织树变化进行单位查询设备情况;

关于单位联系人,必须是拥有维修角色的运维系统中的用户;

可以选择修改一个维修单位的描述信息

4.参数配置管理

平台提供对报修参数进行配置,设置是否自动审核、自动签收或自动确认。

自动审核:进行设备报修审核流程时,系统自动审核该流程;

自动签收:进行签收时,系统自动签收该流程;

自动确认:进行修复确认时,系统自动修复确认

5.用户配置

用户添加时,需要配置“用户名”、“密码”、“确认密码”、“联系电话”等信息;“联系电话”用户维护流程中方便沟通或短信报警;“邮箱地址”用户报警触发时的邮件发送;

可以对已添加的用户进行修改、删除和导出。修改当前用户信息。删除当前用户。将所有的用户信息导出,并保存为“.csv”格式。

添加用户后,需要配置用户角色

6.权限配置

管理用户、角色、组织机构,为用户添加角色和组织机构,为角色添加菜单权限,提供密码重置以及密码解锁功能。

7.组织配置

智能运维管理系统与平台对接后,每隔1小时同步平台中的组织结构,并提供组织的管理和查询;

智能运维管理系统支持手动添加、查询、编辑和删除组织信息;

8.日志管理

对访问本系统的用户,进行访问日志及操作日志管理。

2.10 视频图像快速搜索系统

2.10.1 系统概述

实现快速从海量视频图像数据中查找人、车、物等目标,达到秒级响应,以解决当前业务部门人力不足的问题。包括:视频检索、以图搜图、图像搜索、车辆搜索等应用。

全文检索是目前互联网广泛应用的主流搜索引擎。它的工作原理是计算机索引程序通过扫描文本中的每一个词,对每一个词建立一个索引,指明该词在文章中出现的次数和位置,当用户查询时,检索程序就根据事先建立的索引进行查找,并将查找的结果反馈给用户的检索方式。这个过程类似于通过字典中的检索字表查字的过程。

采用Solr作为全文检索引擎,Solr是一个高性能、基于Lucene的全文搜索服务器。同时对其进行了扩展,提供了比Lucene更为丰富的查询语言,同时实现了可配置、可扩展并对查询性能进行了优化,并且提供了一个完善的功能管理界面,是一款非常优秀的全文搜索引擎。

OPAQ名称是优化的并行加速查询引擎,是在分布式数据库基础上实现的一种中间件技术。OPAQ可以实现分布式数据库中高效查询,在海量数据(亿条记录以上)的查询、检索效果尤为明显。

OPAQ自动识别查询语句,并将查询语句分解成多条子查询语句分发给各个数据库节点进行查询,每个数据库节点返回查询结果有OPAQ融合、排序后输出。OPAQ能够自动的识别到数据所在的节点,可以将子查询任务准确的派发到节点上,使得分布式数据库的查询效率随节点数量的增加而现行增长。

OPAQ是针对海量数据应用开发的一个查询引擎,综合了hadoop与传统数据库的优点,将结构化数据按照一定的规则并行分布式存储到n组数据库节点中,实现了hadoop数据存储和查询检索的并行处理,又保留的结构化数据查询速度快的特点,极大提升了数据存储和查询的效率。

2.10.2 系统功能

1.视频检索

对视频文件进行运动目标检测、目标跟踪、目标分类等分析处理,保存分析生成的结构化信息和目标图片。支持生成历史视频文件的视频摘要,支持叠加型视频摘要和剪切型视频摘要。可对视频结构化信息进行检索并关联视频片断,支持人脸、人体、车辆、非机动车等目标的查找。对视频摘要进行快速查看并关联原始视频。

2.以图搜图

实现人脸和车辆的以图搜图功能。输入人脸照片自动进行检索,按照相似度从高到低展示相似的人脸图片,匹配记录数和匹配相似度可配置;输入车辆照片自动进行检索,按照相似度从高到低展示相似的过车车辆图片,匹配记录数和匹配相似度可配置。

3.图像搜索

实现人脸和车辆的图像搜索功能。输入人脸或车辆图片,可自动提取相关属性信息,并以此为条件进行数据检索,通过大数据检索技术快速返回结果。支持结合出现时间和出现地点的混合条件检索。

4.车辆搜索

运用大数据分布式检索技术,实现对千亿级车辆信息的多条件检索功能。支持通过车辆过车时间、车辆区域、车辆号牌、车辆品牌、车辆细分类型、车身颜色、车辆类别等单个条件或多个条件对车辆进行检索。

按品牌搜车

搜索结果以图片方式展示,内容包括车牌号、卡口位置、车品牌、车型等信息。点击卡口信息,在地图显示拍摄的位置,点击摄像头可以查看原始图片或录像。点击车牌号,可以查看车辆详细信息。

按类别搜车

搜索结果以图片方式展示,内容包括车牌号、卡口位置、车品牌、车型等信息。点击卡口信息,在地图显示拍摄的位置,点击摄像头可以查看原始图片或录像。点击车牌号,可以查看车辆详细信息。

按车牌搜车

搜索结果以图片方式展示,内容包括车牌号、卡口位置、车品牌、车型等信息。点击卡口信息,在地图显示拍摄的位置,点击摄像头可以查看原始图片或录像。点击车牌号,可以查看车辆详细信息。

按照片搜车

一键上传车辆照片,即可自动识别图像中车辆的品牌、车型等信息,并进行相同车型车辆的查询检索。也能够避免无牌、套牌、遮牌等情况对车辆追踪造成的干扰,直接依据车辆的局部特征检索图中特定车辆。

搜索结果以图片方式展示,内容包括车牌号、卡口位置、车品牌、车型等信息。

点击卡口信息,在地图显示拍摄的位置,点击摄像头可以查看原始图片或录像。

点击车牌号,可以查看车辆详细信息。

语义检索(综合查询)

系统应通过选择卡口、图库或者案件来限定搜索范围;通过限定过车时间的范围进一步过滤;同时系统应提供与车辆相关的过滤条件,如车牌号码、车辆品牌和型号、车身颜色等。其中车牌号码应支持模糊查询,使得在无法全部辨认出车牌号码的情况下,尽可能的缩小范围。另外由于车身颜色受光线影响较大,在光线环境不好的情况下识别率会小幅下降,车身颜色应支持多选。

视频关联查询

通过任意点选卡口设备,进行视频查看。实时监控嫌疑车辆。

2.11 动态目标智能挖掘系统

2.11.1 系统概述

动态目标智能挖掘系统基于视频图像实现对车辆和人员的分析研判,通过大量数据的积累和变化规律进行深度的信息挖掘,为第三方业务系统提供数据支持,帮助决策者和管理者提供有价值的线索信息。

车辆信息挖掘:分析某个路口或者某个小区过车信息量,形成一个周期性过车信息模型,可以设置一个阈值,在某一天过车信息不符合过车信息模型规律可以提醒管理人员该路段可能有异常情况发生。

重点人员信息挖掘:对某个类别的重点关注人员的活动信息进行统计,形成一个各类别重点人员(如吸毒人员)活动规律模型,可以帮助公安人员对这些重点人员的活动规律更好把控,能够更好的应对一些突发状况。

2.11.2 总体要求

视频图像数据中在在着大量的人、车、物等动态目标,通过对动态目标的提取和分析,结合大数据挖掘技术和业务需求,可对动态目标的轨迹、行为、特征等进行深度分析,实现动态目标的布控。包括:车辆轨迹分析、车辆套牌分析、车辆尾随分析、车辆预警、人员轨迹分析、人员特征识别、重点人员预警等应用。

2.11.3 系统功能

支持以人、车、其他活动目标的各种属性为条件进行多种智能检索及应用;可将人员、车辆、其他活动目标的检索结果以缩略图形式展现。

车辆轨迹分析

根据车辆号牌检索条件快速查找车辆一段时间内的行驶记录,并根据经过点位的坐标在地图上绘制车辆行驶轨迹,轨迹可按照经过时间进行标记序号和起点终点,可以动画形式按序播放车辆行驶路径。

车辆套牌分析

利用时空分析短时间较大距离移动的同号牌车辆信息,通过计算两点之间的最短路径,确定是否为疑似套牌车,建立疑似套牌车辆库。可结合其他业务模型进一步确认套牌车辆。

车辆尾随分析

实现快速查找指定车牌号车辆在一段时间内的尾随车辆,根据指定车牌号一段时间内经过的时间和地点信息,分析与之在短时间内具有相似轨迹的车辆,可指定尾随时间间隔和尾随出现次数。

车辆预警

运用大数据分析和流处理技术,实现车辆的布控告警功能。可对指定车牌号进行布控,并与接收的实时数据进行比对,匹配成功后进行告警,具备布控管理和告警管理功能。

人员轨迹分析

根据人脸照片快速查找目标人脸一段时间内的出现记录,并根据相似度由高到低进行排序,通过手动标记可根据经过点位的坐标在地图上绘制人脸现出现轨迹,轨迹可按照经过时间进行标记序号和起点终点,可以动画形式按序播放行进路径。

人员特征识别

通过人像识别算法,将图像中出现的人员进行特征识别、提取,特征信息与现实人员库进行别对,可将目标的身份进行核实,并可设置特殊人员布防,发现后产生告警。

依托于行为分析算法,结合图像反应出的人员行为,判断现场发生的场景,并作出相应的预案和应对。通过人脸和人体识别分析技术,实现视频图像中人脸和人体的属性特征识别,可识别包括:是否戴眼镜、是否戴帽子、是否戴口罩、是否背包,以及衣服颜色等特征,并支持特征检索和分析。

重点人员预警

建立重点人员数据库并进行分类管理,实现对重点人员的布控和告警功能,运用人脸实时比对技术,当重点人员照片比对超过指定相似度阈值时进行告警。具备布控管理和告警管理功能。

2.12 事件关联实时预警系统

2.12.1 总体要求

通过对视频图像中动态场景的智能分析,实时发现关键事件的发生并预警,结合大量外部数据信息进行关联分析,实现重大事件和治安态势的预测。包括:关键事件预警、治安态势预测、异常行为预警、人流密度检测、重点区域布控等应用。

2.12.2 功能描述

1.关键事件预警

通过对视频流的分析,可自动发现异常事件并进行预警,支持的异常事件包括:物品遗留、物品丢失、人群聚集、车辆统计、拥堵检测等异常事件。

2.治安态势预测

治安态势分析服务通过人群密度和流向算法,对视频中的画面进行实时记录和分析行为。进而实现人群统计、密度分析、混乱分析、群体流向分析、滞留情况分析等分析。

通过对视频场景的分析,结合画面中运动目标的状态进行分析,结合关键事件预警进行治安态势分预测,及时发现可能存在的治安隐患,并结合历史数据进行趋势分析。

视频的实时智能规则分析,可预先设置好预警联动规则。当发生相应规则的事件后,如造成重大人员伤亡、财产损失、生态环境破坏和严重社会危害,危及公共安全的紧急事件,平台上进行操作布控,布控好的摄像机将会同时打开监控图像,形成对案发地的监控封锁,同时实时报警。

3.异常行为预警

通过对视频流的分析,可自动发现异常行为并进行预警,支持的异常行为包括:区域入侵、徘徊检测、奔跑检测、打架检测、逆行检测、攀高检测、人员脱岗检测、超长滞留检测等。

(1)绊线检测

绊线监测能够识别出单方向、双方向穿越警戒线,以及逆行、转向(双线检测)等行为,包括识别物体运行方向,对逆行等进行报警。

通过智能图像处理技术,自动检测穿越警戒线的运动目标。在摄像机监视的场景范围内,可以设置多条警戒线并规定其禁止穿越方向。一旦有运动目标穿越预定警戒线即产生告警,并用告警框标识出该运动目标及其运动轨迹。提醒相关人员注意有人或车穿越警戒线。如果运动目标没有按照设定方向穿越警戒线,则不会产生任何告警。

(2)非法停车

非法停车检测通过算法检测到特定区域是否有车辆停放,超过设定时间则自动产生告警。检测区域可以多样化设置,参数选项可以由用户来设定,如布防时间段、车辆的合法停留时间等。

(3)徘徊检测

通过智能图像处理技术,自动检测异常人体行为,如徘徊、倒地、异常速度。在摄像机监视的视场范围内,可以任意设置警戒区域,当有人在警戒区域内无固定路线行走,来回徘徊,当徘徊时间达到预设门限后,则触发徘徊告警,用告警框将徘徊人标识出,并显示其运动轨迹。

(4)打架检测

通过智能图像处理技术,自动检测打架行为,如多人扭打在一起,倒地等异常行为。在摄像机监视的视场范围内,可以任意设置警戒区域,当有人在警戒区域内肢体多次接触,打架,当打架时间达到预设门限后,则触发打架告警,用告警框将打架人群标识出,并显示其运动轨迹。

(5)物品遗留检测

物品遗留检测能够自动检测出监控防区内的可疑行李或遗弃物,发出报警并触发其他行为。物品遗留检测能够对现场出现的新物体进行检测并及时通知操作人员。

在恐怖袭击无处不在的情况下,安全人员对恐怖袭击做出迅速有效地反映显得尤其重要。通过物品遗留监测,可以加强对遗弃物体的及时发现,视频管理系统能够立刻显示遗弃物出现的时间段,识别遗弃物主人并采取正确的行动。例如当消防通道阻塞或物体被遗弃在过道,导致潜在的危险时可以警告安全人员。

(6)物品丢失检测

物品丢失检测是指在指定区域内的物品被偷盗、搬移、取走时提示声光报警信息。适用于银行,博物馆,珠宝店等放置贵重物品的场所,以及停车场、商场、小区等。

物品丢失检测分析服务器根据算法可以设定一定的时间周期,将区域图像数据与原始数据进行比对,当超过设定好的时间,区域物品状态发生变化时候系统就会对消失或移动了的物品报警,可对不同物体设置不同检测条件,比如物品大小、形状等。

(7)出门检测

出门检测是采用能表达人头的图像特征,通过机器学习得到人头识别器,识别器在每帧图像中定位出每个人的具体位置,然后通过融合,跟踪和预测等,得到出门方向人员的定位及报警。

可对目标跨越门口进行检测及报警,跨越方向支持单向和双向。

(8)离岗检测

离岗检测通过智能图像处理技术,自动检测目标(站岗人员)离开岗位。在摄像机监视的场景范围内,可根据需要设置任意形状、多个警戒区域。一旦有满足预设条件的目标离开警戒区域(岗位),则自动产生告警,并用告警框标识出离岗目标,同时依据预设告警动作做出相应反应,提醒相关人员注意有人员离岗。

(9)非法尾随

通过智能图像处理技术,自动检测进入警戒区的人等运动目标。在摄像机监视的场景范围内,可根据需要设置任意形状的警戒区域。检测是否有目标尾随其他目标通过指定的检测区域,一旦有满足预设条件,则自动产生告警,并用告警框标识出尾随人的目标,同时依据预设告警动作做出相应联动,提醒相关人员注意。此功能可以用于对街头犯罪行为的预警,如抢劫等异常行为。

(10)奔跑检测

通过智能图像处理技术,自动检测进入警戒区的人等运动目标。在摄像机监视的场景范围内,可根据需要设置任意形状、任意数量的警戒区域。一旦有满足预设条件的目标产生奔跑行为,则自动产生告警,并用告警框标识出奔跑的目标,同时依据预设告警动作做出相应联动,提醒相关人员注意。此功能可以用于对街头犯罪行为的预警,如抢劫等异常行为。

(11)人群聚集检测

针对广场、重要场所的实时视频,通过检测人群密度、群体运动特征检测人群的聚集、游行、集会等活动。

通过预先设置的告警级别可以将群体事件分为多个级别,针对不同级别的事件产生不同的告警,从而达到群体事件的预警机制。

(12)拥堵检测

利用光流法检测区域中车辆的运动速度,计算车辆面积占整个区域的比例。如果速度小于速度阈值,并且车辆面积占区域面积的比例大于面积阈值,则认为路面拥堵。当拥堵非常严重时,光流检测不到运动目标,此时结合纹理检测进行判断,如果能检测到纹理,则认为路面拥堵,反之认为路面无车。

可应用于城区道路的监测,改善交通秩序。

(13)人数统计和车流统计

通过智能图像处理技术,自动进行单向、双向累计人流统计,人群稠密度检测。典型应用包括:

人员非法聚集:基于摄像机采集视频中运动目标的特征为分析目标,通过区域和方向的设定来统计运动目标,通过软件自动分析出现在视频范围内的人群的密度,当达到一定的设定密度时系统可发出报警信号;

人数统计:可对单向或双向通过的人员数量进行统计;

车流统计:对单向或双向通过的车辆数量进行统计。

(14)烟火检测

通过智能图像处理技术,自动进行对摄像机采集的视频中的烟火进行检测。通过区域的设定,通过烟火的形状、颜色、闪烁等特征规则进行综合判断,自动检测出现在视频范围内的烟花,实现自动报警。

(15)实时标注

采用先进的智能分析技术,自动提取实时视频图像中的人体、人脸和车辆的细节特征信息,对目标类型、颜色等形成结构化描述,为事后研判分析提供数据基础,保证信息查找检索的高效性,极大提高了公安的破案效率。

4.人流密度检测

检测实时视频画面中人群并对其进行分析,可统计画面中人员数量、密度和人群聚集状态,可设定预警参数进行预警提醒。

5.重点区域布控

针对重点区域的监控点位,可进行实时布控,通过分析重点区域的监控视频,并设定预警事件,当事件发生时进行告警提醒,可进行布控管理和告警管理。

视频布控功能,通过运用人脸识别比对、车辆综合信息分析等核心技术,通过建立布控库,设置布控时间和区域范围,当设置了布控任务的摄像机捕捉到的人脸与布控库比对的结果达到设定阈值后产生报警,可迅速调动周边警力,对嫌疑人员实施抓捕。

支持多个设备预案信息的设备,且设置预案的数量不限制。

支持各种联动规则,当触发报警时,启动相关预案。例如:某特定区域自动或手动触发预案联动时,系统向设定的人员发送短信或者邮件。

采用基于深度学习和计算机视觉技术的人脸识别算法,实现实时监控画面人脸信息的捕获展示和基于布控人员库的实时布控报警。通过对视频中人员人脸的实时追踪,与布控库中的人脸实时比对,对比中的嫌疑人脸自动报警,从而减少人员值守监控的工作强度,提高工作效率。支持对布控任务统一管理,包括查看、编辑及删除操作;支持新建布控任务,包括任务名称、布控级别、起止时间、布控库以及布控摄像机的设置。

2.13 视频解析算法孵化系统

2.13.1 系统概述

视频结构化解析针对海量图片和视频进行二次分析,既可以实时接入前端摄像机进行在线二次分析,也可以对海量的图片和视频进行离线二次分析;二次分析主要检测提取人员和车辆目标,输出目标的结构化信息,并进行特征值提取,以便于后续的检索比对操作。实现用户对海量视图片和视频的应用问题。

人像结构化引擎,是基于国际领先的人脸识别技术和高效的计算架构研发的算法系统,内置基于深度学习(其核心为多层神经网络)的人脸技术,实现准确的多角度人脸检测、五官标定、面部特征点定位,以及特征提取与比对,通过高效的软件异构计算架构实现对多路高清前端进行并行处理,以保证计算资源的最高效利用。

人像结构化引擎的主要功能:提取高清摄像机上传的数据中的人脸。

人像识别智能监控系统的技术核心是深度学习模型,当前已经实现人像特征的深度学习,本项目需要基于特殊特征的定制化深度学习训练,包含眼镜、性别、年龄和衣服颜色四个领域的算法训练。

眼镜特征深度学习识别及应用

基于人像面部特征训练,收集和标注人像面部特征样本,区分是否带眼镜,并通过深度学习进行数据训练,形成支撑眼镜特征的算法模型。

年龄特征深度学习识别及应用

基于人像面部特征训练,收集和标注人像面部特征样本,标注样本人像年龄大小,并通过深度学习进行数据训练,形成支撑年龄特征的算法模型。

性别特征深度学习识别及应用

基于人像面部特征训练,收集和标注人像面部特征样本,标注样本性别属性,并通过深度学习进行数据训练,形成支撑性别特征的算法模型。

衣服颜色特征深度学习识别及应用

基于人像衣服特征训练,收集和标注人像衣服特征样本,标注样本衣服颜色属性,并通过深度学习进行数据训练,形成支撑衣服颜色特征的算法模型。

2.13.2 功能描述

1.视频多目标检测/分类标注

可标注视频每一帧中目标的位置、类别,可对同一目标进行唯一编号,标注结果记入json文件。

2.人脸识别标注

可对人脸身份进行标注。

人脸检测的任务是判断图像中是否存在人脸。若存在人脸,给出其在图像中的坐标位置、人脸区域大小等信息。而人脸跟踪则需要进一步输出所检测到的人脸位置、大小等状态随时间的连续变化情况。

通过人脸特征点的检测与标定可以确定人脸图像中显著特征点的位置(如眼睛、眉毛、鼻子、嘴巴等器官),同时还可以得到这些器官及其面部轮廓的形状信息的描述。根据人脸特征点检测与标定的结果,通过某些运算得到人脸特征的描述(这些特征包括:全局特征和局部特征,显式特征和统计特征等)。

通过将输入人脸图像与人脸库中的所有已知原型人脸图像计算相似度并对其排序来给出输入人脸的身份信息。

3.人体属性标注

可对人体的衣着、穿戴、性别、年龄等属性进行标注。

4.车辆特征属性标注

可对车牌、车型等属性进行标注。

5.特征检索

系统可根据人体特征进行检索。固定检索条件包含:时间段、监控点、目标颜色、目标方向、目标大小、目标速度、性别、是否戴眼镜、是否戴帽子、上衣类型、下装类型、是否戴口罩、发型、是否背包、是否拎东西、是否骑车、年龄段。

支持模糊检索:人体颜色、性别。

6.人员轨迹分析

系统可对人员轨迹进行分析。支持在地图上显示目标的轨迹,并显示相应的时间点。支持目标在地图上动态显示轨迹。

7.性能

数据库支持1000万图片。

案例搜索
合作联系
010-82872655
典型案例