[01211203]海量视频内容快速检索与深度分析的仿生视觉关键技术及其应用

1、课题来源与背景 广东省自然科学基金重点项目“快速智能多分类算法的设计与实现”（9251009001000005）、广东高校优秀青年创新人才培育项目”基于核方法的不平衡数据分类研究”（LYM08074）。 2、技术原理及性能指标 （1）技术原理 围绕着新形势下国家对智能海量视频数据处理、视频内容搜索引擎的重大需求,项目组通过多项应用基础研究与产学研联合攻关,以统计学习、核方法、支持向量机、集成学习以及进化计算等为主要技术原理,在视频内容检索与深度分析方面突破了一系列关键技术,包括： 1)视频细粒度内容的鲁棒性快速检索算法; 2)海量视频中人脸五官特征的快速检索算法; 3)异构媒体数据的自动浓缩与转换方法; 4)多模态数据的敏感性信息智能检测方法。 （2）性能指标 1)对象特征检索准确率——颜色检索准确率大于95%。对象移动方向检索准确率大于95%。对象区域检索准确率大于95%。不规则物品轮廓以图搜图准确率大于95%。 2)对象特征检索响应时间——视频融合时间比小于7%。通过对象移动方向检索,单个摘要事件平均响应时间不超过0.02 秒。通过对象区域检索,单个摘要事件平均响应时间不超过0.02 秒。 3)车牌信息检索准确率——视频截图内容中车牌信息检索准确率大98%。 4)车牌信息检索响应时间——视频截图内容中车牌信息检索的平均响应时间小于0.1 秒。 5)安全带事件分析准确率——通过人脸信息检索不系安全带事件的视频截图准确率大于96%。 6)安全带事件分析响应时间——通过人脸信息检索不系安全带事件的视频截图的响应时间小于0.3秒。 7)蒙面人事件分析准确率——彩色视频内容中蒙面人脸的检测准确率大于95%。准确率=（检测到的蒙面人个数/视频中出现的蒙面人个数）*100%。夜间红外视频内容中蒙面人脸的检测准确率大于95%。 8)人脸图像比对准确率、人脸图像比对响应时间——人脸图像比对准确率大于98%。人脸快速比对平均响应时间小于1 秒。 9)色情信息检测准确率——视频截图内容的色情信息自动检测准确率大于98%。 10)色情信息检测响应时间——视频截图内容的色情信息自动检测响应时间小于0.3 秒。 11)舆情信息相关文字自动检测分析准确率——桌面视频截图内容的舆情信息相关文字自动检测准确率大于 96%。12)舆情信息相关文字自动检测分析响应时间——桌面视频截图内容的舆情信息相关文字自动检测平均响应时间小于1 秒。 3、技术的创造性与先进性 成果的创造性： 1)提出了元学习框架与下抽样集成学习算法,模拟了生物视觉的滤镜和印象行为,对类型（如,人与车等）、颜色、轮廓、轨迹、文字和形态等视频对象进行分类并标签,实现了视频内容（特别是人脸特征信息）快速检索。 2)基于正则化高斯混合模型,用多核学习方法,对视频对象的轮廓、运动轨迹、背景和事件时间进行了融合,模拟了生物视觉的回忆和聚焦行为,实现了视频内容自动浓缩智能处理,在海量存储基础上进行舆情分析和色情视频检测。 成果的先进性 1)仿生视觉关键技术既提高了视频内容分析的精确度,又大大提高了视频内容检索的速度,突破了视频处理高时耗的技术瓶颈,使视频内容检索快如文本检索。 2)仿生视觉关键技术不仅实现了对视频对象的自动检测,而且实现了对视频对象的行为和事件的智能理解,使智能分析覆盖到蒙面人、安全带、敏感性信息等深度信息。 4、技术的成熟程度,适用范围和安全性 该成果已处于成熟应用阶段。视频内容快速检索系统已在交警部门收费管理、铁路公安机关的票证查验、便民服务、户政管理等领域得到了广泛应用。视频内容深度分析系统涵盖了人员和身份识别、数据和信息、应用和流程、网络、服务器和终端等方面的敏感信息分析和安全预警,成功应用于政府、军队、交通、互联网、运营商、金融、能源、以及电力等行业。安全性高。 5、应用情况及存在问题 项目成果在铂亚公司的RETRACK-案件事后分析系统和实时视频预警软件中得到了融合应用。系统应用于司法监管,提高了办案效率;系统用于交通道路的实时监控与交通信息处理,成为智能交通系统关键部分,在道路拥堵事故处理和道路指挥上发挥重要作用;系统可以预警高速公路各项潜在的危险事件,有效预防发生撞车、堵塞、人员伤亡等事故。 通过与北明软件有限公司合作,项目成果被成功应用于广州市社会治安视频监控系统城市视频专网信息安全保障体系、广州市荔湾区教育局校园治安视频系统等多项智慧城市建设项目,在敏感信息保护、信息交换安全、身份统一管理、系统环境统一、电子政务平台和数字化校园建设等方面发挥了重要作用,也为建设智慧广州、改善市民的生活环境、提升市民的安全感和幸福感起了促进作用。 6、历年获奖情况 无