文献类型：专利

专利类型：发明专利

是否失效：否

是否授权：否

申 请 号：CN202010874439.2

申 请 日：20200827

发 明 人：易军 庞一然 郑福建 郭鑫 宋光磊 周伟 雷友峰 张秀才 邓建华 杨利平

申 请 人：重庆科技学院

申请人地址：401331 重庆市沙坪坝区大学城东路20号

公 开 日：20201117

公 开 号：CN111950518A

代 理 人：韩慧芳

代理机构：50223 重庆蕴博君晟知识产权代理事务所(普通合伙)

语　　种：中文

摘　　要：本发明提供了一种基于光流判断与人员分布概率的暴力行为检测训练数据集数据增强方法。首先，获取一定量的视频帧，利用稠密光流对视频帧中的高危暴力区域进行提取。然后，利用CSR‑Net人群计数网络，得到视频帧中的人员分布。最后，综合判断视频帧中最可能发生暴力行为的区域，对视频帧进行截取并重新输出为新的视频。该方法对用于暴力行为识别训练的视频数据集进行优化，提取神经网络的ROI，将暴力行为仅出现在监控画面的角落，或是出现在较远距离，导致需关注的重点目标过小的视频训练集数据进行增强，能够有效提升神经网络的训练效果。

主 权 项：1.一种用于视频中暴力行为检测的训练数据增强方法，该方法包括以下步骤：S1：利用现有暴力行为公开数据集，或从互联网上采集包含暴力行为的视频；S2：使用光流法对视频连续N帧图像进行光流检测；使用光流法对视频帧进行光流检测的具体步骤包括：S21：去除每帧图像中强度小于光流幅度阈值T1的光流矢量；S22：将连续N帧图像的光流信息叠加，得到光流强度信息图；S23：使用图连通性算法，获取图像的光流强度连通子图；S3：使用预训练的CSR-Net人群计数网络，提取视频中连续N帧的人员分布概率信息；提取视频中连续N帧的人员分布概率信息的具体步骤包括：S31：抑制每帧图像中分布概率积分值小于预设阈值T2的图像区域；S32：将连续N帧的概率信息叠加，得到人员分布概率信息；S4：联合光流强度图与人员分布概率图，获取视频中最可能发生暴力行为的区域；S5：对视频疑似暴力行为区域进行截取并输出，形成增强后的训练视频数据集。

关 键 词：暴力行为 视频帧 对视频帧  神经网络  暴力行为检测  视频训练集  训练数据集  稠密光流  分布概率  监控画面 识别训练  视频数据  数据增强  训练效果  综合判断  远距离  截取  光流 视频 输出  人群  优化  网络  

IPC专利分类号：G06K9/00(20060101);G06K9/38(20060101);G06K9/46(20060101);G06K9/62(20060101);G06N3/04(20060101);G06N3/08(20060101)