视频质量AI智能分析诊断系统解决方案建设思路与设计
一、建设背景
随着安防视频覆盖日趋完善,视频在安全管理等方面发挥了不可替代的作用,但在使用过程中仍然存在视频掉线、视频人为遮挡、视频录像存储时长不足等问题,存在较大的安全隐患。
1)视频在安全生产管理上作用日趋凸显,视频质量需长期保障
受环境、老化、网络、供电、人为等多方面因素影响,摄像头容易出现掉线、录像缺失、视频调阅失败以及图像画面异常(颜色异常、监控视角异常、图像虚焦模糊、监控镜头脏污、视频图像遮挡、视频图像花屏)等问题。
2)视频体量大、人力有限,需要自动化检测手段
传统的视频质量问题,往往依赖人力进行视频浏览巡检,随着视频规模逐渐增大,人力巡检的方式往往无法满足需要;而原有视频运维平台存在准确率低、异常提醒滞后等问题,有必要利用视频AI的能力进行自动化的视频巡检,提升发现问题的效率。
二、方案介绍
1、方案架构
1)前端感知层:新建和存量视频资源,包括NVR、摄像机以及视频汇聚EasyCVR视频监控平台,支持GB/T28181、ONVIF、海康/大华/宇视等主流设备厂商私有SDK协议。
2)能力支撑层:系统提供视频汇聚中台(EasyCVR)、视频AI中台(TSINGSEE青犀AI算法中台),实现视频的汇聚、AI智能分析等,为系统应用提供能力支撑。
3)系统应用层:根据巡检业务需求,提供设备状态巡检、录像状态巡检、图像质量诊断分析、告警通知等实战应用。
2、视频质量诊断智能检测
1)画面异常AI检测算法
检测由于摄像机故障、解码库不匹配、视频传输网络等原因导致的视频图像画面呈现出花屏、黑屏、灰屏、绿屏、蓝屏或者半屏杂色覆盖的视频画面异常现象。TSINGSEE青犀AI算法中台画面异常检测算法支持检测支持识别画面黑屏、灰屏、白屏、绿屏、蓝屏、花屏,镜头有遮挡、有污染,以及摄像机角度异常等情况。
2)告警上报
当检测到视频画面异常时,系统将立即抓拍并发出告警,同时推送告警消息至管理人员,如:短信、语音、邮件等方式,便于管理人员及时查看和处理。TSINGSEE青犀AI算法中台支持查看异常告警详情,包括算法任务基本信息、异常画面、告警详情等信息;支持根据算法任务类型、推送状态、日期等条件进行筛选查看。
3、设备状态检测
视频汇聚/安防监控EasyCVR视频融合平台可以对系统及设备的运行状态进行监测与数据统计;可通过信令进行设备的在线/离线状态进行检测统计,同时对每一路视频流进行拉取检测,判断设备是否可正常进行视频实时浏览。
4、视频融合汇聚管理
AI视频智能分析/视频监控管理平台EasyCVR视频融合平台基于云边端架构,可支持海量视频汇聚管理,能提供视频监控直播、云端录像、云存储、录像检索与回看、智能告警、平台级联、智能分析等视频服务。平台支持设备通过4G、5G、WIFI、有线等方式接入,支持多协议、多类型设备接入,包括:国标GB/T28181协议、RTMP、RTSP/Onvif协议、海康Ehome、海康SDK、大华SDK、华为SDK、宇视SDK、乐橙SDK、萤石云SDK等。
经平台接入的视频流能实现多格式分发,包括:RTMP、RTSP、HTTP-FLV、WebSocket-FLV、HLS、WebRTC、ws-fmp4、http-fmp4等,支持在手机、电脑、电子大屏、电视墙、小程序/微信端等多终端上展示与浏览。为了便于用户二次开发、集成与调用,我们也提供了丰富的API接口供用户使用,有需要的用户可以查看官方API文档。