首页 > 专利 > 阜阳师范学院 > 一种多运动目标追踪监测方法专利详情

一种多运动目标追踪监测方法   0    0

有效专利 查看PDF
专利申请流程有哪些步骤?
专利申请流程图
申请
申请号:指国家知识产权局受理一件专利申请时给予该专利申请的一个标示号码。唯一性原则。
申请日:提出专利申请之日。
2016-03-18
申请公布
申请公布指发明专利申请经初步审查合格后,自申请日(或优先权日)起18个月期满时的公布或根据申请人的请求提前进行的公布。
申请公布号:专利申请过程中,在尚未取得专利授权之前,国家专利局《专利公报》公开专利时的编号。
申请公布日:申请公开的日期,即在专利公报上予以公开的日期。
2016-09-07
授权
授权指对发明专利申请经实质审查没有发现驳回理由,授予发明专利权;或对实用新型或外观设计专利申请经初步审查没有发现驳回理由,授予实用新型专利权或外观设计专利权。
2019-04-05
预估到期
发明专利权的期限为二十年,实用新型专利权期限为十年,外观设计专利权期限为十五年,均自申请日起计算。专利届满后法律终止保护。
2036-03-18
基本信息
有效性 有效专利 专利类型 发明专利
申请号 CN201610160824.4 申请日 2016-03-18
公开/公告号 CN105844634B 公开/公告日 2019-04-05
授权日 2019-04-05 预估到期日 2036-03-18
申请年 2016年 公开/公告年 2019年
缴费截止日
分类号 G06T7/246G06T7/254G06T7/277G06T7/80H04N7/18 主分类号 G06T7/246
是否联合申请 独立申请 文献类型号 B
独权数量 1 从权数量 1
权利要求数量 2 非专利引证数量 0
引用专利数量 10 被引证专利数量 0
非专利引证
引用专利 CN101068342A、CN104125433A、CN103237192A、CN102289822A、CN104301669A、CN101465033A、CN101610396A、CN101883261A、CN102223522A、CN101572804A 被引证专利
专利权维持 3 专利申请国编码 CN
专利事件 事务标签 公开、实质审查、授权
申请人信息
申请人 第一申请人
专利权人 阜阳师范学院 当前专利权人 阜阳师范学院
发明人 冯莹莹 第一发明人 冯莹莹
地址 安徽省阜阳市清河路 邮编 236000
申请人数量 1 发明人数量 1
申请人所在省 安徽省 申请人所在市 安徽省阜阳市
代理人信息
代理机构
专利代理机构是经省专利管理局审核,国家知识产权局批准设立,可以接受委托人的委托,在委托权限范围内以委托人的名义办理专利申请或其他专利事务的服务机构。
北京华仲龙腾专利代理事务所 代理人
专利代理师是代理他人进行专利申请和办理其他专利事务,取得一定资格的人。
李静
摘要
本发明公开了一种多运动目标追踪监测方法,涉及视频监控技术领域,主要步骤包括:视频数据处理单元将扩展的卡尔曼滤波和改进的均值偏移算法相结合跟踪运动目标,得到候选目标区域;在候选目标区域中进行运动目标的特征匹配,得出候选目标;目标定位模块根据结合DEM数据对候选目标进行位置确定;中央控制单元对来自不同视频数据处理单元的候选目标信息进行同步;中央控制单元建立匹配模型,实现目标关联和航迹关联;摄像头管理模块根据虚拟目标信息计算不同摄像头的偏转方向和角度,并将数据一起传送给各个摄像头控制模块;摄像头控制模块接收不同摄像头的控制信息,仅提取与自身匹配的控制信息,并控制摄像头偏转。
  • 摘要附图
    一种多运动目标追踪监测方法
  • 说明书附图:图1
    一种多运动目标追踪监测方法
  • 说明书附图:图2
    一种多运动目标追踪监测方法
法律状态
序号 法律状态公告日 法律状态 法律状态信息
1 2019-04-05 授权
2 2016-09-07 实质审查的生效 IPC(主分类): G06T 7/00 专利申请号: 201610160824.4 申请日: 2016.03.18
3 2016-08-10 公开
权利要求
权利要求书是申请文件最核心的部分,是申请人向国家申请保护他的发明创造及划定保护范围的文件。
1.一种多运动目标追踪监测方法,其特征在于,包括以下步骤:
步骤1:摄像头定标处理;
步骤2:摄像头实时获取监控区域内的视频信息,并传送给各自的视频数据处理单元;
步骤3:视频数据处理单元对图像序列进行三帧差分检测,获取运动目标的特征信息;
步骤4:视频数据处理单元将扩展的卡尔曼滤波和改进的均值偏移算法相结合跟踪运动目标,得到候选目标区域;
步骤5:在候选目标区域中进行运动目标的特征匹配,得出候选目标;
步骤6:目标定位模块根据结合DEM数据对候选目标进行位置确定;
步骤7:中央控制单元对来自不同视频数据处理单元的候选目标信息进行同步;
步骤8:中央控制单元建立匹配模型,实现目标关联和航迹关联;
步骤9:摄像头管理模块根据虚拟目标信息计算不同摄像头的偏转方向和角度,并将数据一起传送给各个摄像头控制模块;
步骤10:摄像头控制模块接收不同摄像头的控制信息,仅提取与自身匹配的控制信息,并控制摄像头偏转;
其中,所述步骤4采用扩展的卡尔曼滤波和改进的均值偏移算法,具体包括,
步骤4.1:自动初始化稳定的新目标,确定卡尔曼滤波器的初始状态向量;
步骤4.2:利用初始化后的卡尔曼滤波器预测当前时刻当前帧的候选目标位置;
步骤4.3:以卡尔曼滤波器预测的候选目标位置为均值偏移算法的迭代起始点,开始均值偏移迭代过程,直至收敛,得到预测的目标位置;
步骤4.4:将均值偏移算法得到的预测目标位置作为卡尔曼滤波器的观测向量,对卡尔曼滤波器进行更新;
步骤4.5:利用更新后的卡尔曼滤波器,重复步骤4.2至4.4,计算出下一帧的目标位置;
所述步骤5中,若运动目标在当前帧图像中被检测到,则保留特征匹配得到的候选目标的位置值(x1,y1),与均值偏移跟踪预测的目标位置(x2,y2)进行加权平均得到最终目标位置(x,y),最终目标位置(x,y)进行IIR滤波,得到目标在当前帧的状态向量作为卡尔曼滤波器的观测向量;若运动目标在当前帧图像中没有被检测到,则判断运动目标连续消失的图像帧数,超过设定阈值,则判定目标消失,未超过设定阈值,则假定其被遮掩,将均值偏移跟踪预测的目标位置作为遮掩时的运动目标真实值保存下来,并作为下一帧卡尔曼滤波器的观测向量。

2.根据权利要求1所述的多运动目标追踪监测方法,其特征在于:所述步骤7中的同步包括时间同步和特征同步;
所述时间同步通过中央控制单元以一定频率向各个视频数据处理单元发送时间同步信号,各个视频数据处理单元以中央控制单元的时间为准来实现;
所述特征同步通过目标缓冲池链来完成,所述目标缓冲池由真实特征数据缓冲区和虚拟特征数据缓冲区构成,真实特征数据缓冲区存储中央控制单元获取的来自某一视频数据处理单元的r个真实特征数据,分别表示为t、t+k1、...、t+kr-1、,虚拟特征数据缓冲区累计插值或预测后的s个结果,分别表示为t′、t′+k′1、...、t′+k′s-1、,属于该视频数据处理单元的n个目标缓冲池组成链式结构,具体实现包括以下步骤,
S101:中央控制单元接收到任一视频数据处理单元的真实特征数据后,遍历与其连接的所有视频数据处理单元,对于与本次数据来源相匹配的视频数据处理单元,执行S102,否则执行S103,所有与其连接的视频数据处理单元都执行完毕,则继续下一轮的数据接收;
S102:遍历真实特征数据链,找到目标缓冲池链中与之相同的目标编号,以先进先出的方式更新真实特征数据缓冲区和虚拟特征缓冲区,如果目标缓冲池链中没有与之相同的目标编号,则在链中添加该目标的缓冲池并初始化,执行完毕返回S101;
S103:遍历目标缓冲池链,以本次数据的感知时间为插值自变量,以真实特征缓冲区中的数据为插值节点,执行预测算法得到虚拟特征数据,以先进先出的方式更新虚拟特征数据缓冲区,执行完毕返回S101。
说明书

技术领域

[0001] 本发明涉及视频监控技术领域,尤其是一种多运动目标追踪监测方法。

背景技术

[0002] 随着信息获取技术的发展,视频监控系统已经广泛运用于各个领域,能够帮助人们实时获取监控场景内的信息,例如,家长在家里或者工作单位通过视频监控就可以了解孩子在幼儿园的活动情况。在现实的视频监控系统中,一个固定摄像头监控一个场景,尤其是范围较大的场景几乎是不可能的。一个好的解决方案是通过多个可以转动的摄像头形成一个视频监控网络,协同地进行连续无缝监控;但是这对多个摄像头信息的融合,摄像头任务的分配,运动目标被障碍物遮挡时候的数据处理,都有着一定的要求。现有技术或多或少存在多个摄像头信息不同步,摄像头控制信息滞后甚至错乱,目标定位不精确,遮挡处理不适当等问题。

发明内容

[0003] 针对上述问题,本发明提供一种多运动目标追踪监测方法,摄像头控制实时、精准,易于扩展。
[0004] 为了解决上述技术问题,本发明的技术方案为:
[0005] 一种多运动目标追踪监测方法,包括以下步骤:
[0006] 步骤1:摄像头定标处理;
[0007] 步骤2:摄像头实时获取监控区域内的视频信息,并传送给各自的视频数据处理单元;
[0008] 步骤3:视频数据处理单元对图像序列进行三帧差分检测,获取运动目标的特征信息;
[0009] 步骤4:视频数据处理单元将扩展的卡尔曼滤波和改进的均值偏移算法相结合跟踪运动目标,得到候选目标区域;
[0010] 步骤5:在候选目标区域中进行运动目标的特征匹配,得出候选目标;
[0011] 步骤6:目标定位模块根据结合DEM数据对候选目标进行位置确定;
[0012] 步骤7:中央控制单元对来自不同视频数据处理单元的候选目标信息进行同步;
[0013] 步骤8:中央控制单元建立匹配模型,实现目标关联和航迹关联;
[0014] 步骤9:摄像头管理模块根据虚拟目标信息计算不同摄像头的偏转方向和角度,并将数据一起传送给各个摄像头控制模块;
[0015] 步骤10:摄像头控制模块接收不同摄像头的控制信息,仅提取与自身匹配的控制信息,并控制摄像头偏转;
[0016] 其中,所述步骤4采用扩展的卡尔曼滤波和改进的均值偏移算法,具体包括,[0017] 步骤4.1:自动初始化稳定的新目标,确定卡尔曼滤波器的初始状态向量;
[0018] 步骤4.2:利用初始化后的卡尔曼滤波器预测当前时刻当前帧的候选目标位置;
[0019] 步骤4.3:以卡尔曼滤波器预测的候选目标位置为均值偏移算法的迭代起始点,开始均值偏移迭代过程,直至收敛,得到预测的目标位置;
[0020] 步骤4.4:将均值偏移算法得到的预测目标位置作为卡尔曼滤波器的观测向量,对卡尔曼滤波器进行更新;
[0021] 步骤4.5:利用更新后的卡尔曼滤波器,重复步骤4.2至4.4,计算出下一帧的目标位置;
[0022] 所述步骤5中,若运动目标在当前帧图像中被检测到,则保留特征匹配得到的候选目标的位置值(x1,y1),与均值偏移跟踪预测的目标位置(x2,y2)进行加权平均得到最终目标位置(x,y),最终目标位置(x,y)进行IIR滤波,得到目标在当前帧的状态向量作为卡尔曼滤波器的观测向量;若运动目标在当前帧图像中没有被检测到,则判断运动目标连续消失的图像帧数,超过设定阈值,则判定目标消失,未超过设定阈值,则假定其被遮掩,将均值偏移跟踪预测的目标位置作为遮掩时的运动目标真实值保存下来,并作为下一帧卡尔曼滤波器的观测向量。
[0023] 进一步的,所述步骤7中的同步包括时间同步和特征同步;所述时间同步通过中央控制单元以一定频率向各个视频数据处理单元发送时间同步信号,各个视频数据处理单元以中央控制单元的时间为准来实现;所述特征同步通过目标缓冲池链来完成,所述目标缓冲池由真实特征数据缓冲区和虚拟特征数据缓冲区构成,真实特征数据缓冲区存储中央控制单元获取的来自某一视频数据处理单元的r个真实特征数据,分别表示为t、t+k1、...、t+kr-1,虚拟特征数据缓冲区累计插值或预测后的s个结果,分别表示为t′、t′+k′1、...、t′+k′s-1,属于该视频数据处理单元的n个目标缓冲池组成链式结构,具体实现包括以下步骤,[0024] S101:中央控制单元接收到任一视频数据处理单元的真实特征数据后,遍历与其连接的所有视频数据处理单元,对于与本次数据来源相匹配的视频数据处理单元,执行S102,否则执行S103,所有与其连接的视频数据处理单元都执行完毕,则继续下一轮的数据接收;
[0025] S102:遍历真实特征数据链,找到目标缓冲池链中与之相同的目标编号,以先进先出的方式更新真实特征数据缓冲区和虚拟特征缓冲区,如果目标缓冲池链中没有与之相同的目标编号,则在链中添加该目标的缓冲池并初始化,执行完毕返回S101;
[0026] S103:遍历目标缓冲池链,以本次数据的感知时间为插值自变量,以真实特征缓冲区中的数据为插值节点,执行预测算法得到虚拟特征数据,以先进先出的方式更新虚拟特征数据缓冲区,执行完毕返回S101。
[0027] 本发明的有益效果:每个云台摄像头配备视频数据处理单元,对其图像序列进行处理,减轻中央控制单元的负担,且易于扩展,单独配备目标定位模块和摄像头控制模块,实现目标精准定位和摄像头及时控制;对来自不同摄像头的信息进行同步处理,解决不同步的问题;对运动目标被遮挡的情况进行了适当处理,保证运动目标航迹的连续性。

实施方案

[0030] 下面结合附图和具体实施方式对本发明作进一步详细的说明。本发明的实施例是为了示例和描述起见而给出的,而并不是无遗漏的或者将本发明限于所公开的形式。很多修改和变化对于本领域的普通技术人员而言是显而易见的。选择和描述实施例是为了更好说明本发明的原理和实际应用,并且使本领域的普通技术人员能够理解本发明从而设计适于特定用途的带有各种修改的各种实施例。
[0031] 实施例1
[0032] 本发明保护一种多运动目标追踪监测方法,包括以下步骤:
[0033] 步骤1:摄像头定标处理;
[0034] 步骤2:摄像头实时获取监控区域内的视频信息,并传送给各自的视频数据处理单元;
[0035] 步骤3:视频数据处理单元对图像序列进行三帧差分检测,获取运动目标的特征信息;
[0036] 步骤4:视频数据处理单元将卡尔曼滤波和均值偏移算法相结合跟踪运动目标,得到候选目标区域;
[0037] 步骤5:在候选目标区域中进行运动目标的特征匹配,得出候选目标;
[0038] 步骤6:目标定位模块根据结合DEM数据对候选目标进行位置确定;
[0039] 步骤7:中央控制单元对来自不同视频数据处理单元的候选目标信息进行同步;
[0040] 步骤8:中央控制单元建立匹配模型,实现目标关联和航迹关联;
[0041] 步骤9:摄像头管理模块根据虚拟目标信息计算不同摄像头的偏转方向和角度,并将数据一起传送给各个摄像头控制模块;
[0042] 步骤10:摄像头控制模块接收不同摄像头的控制信息,仅提取与自身匹配的控制信息,并控制摄像头偏转;
[0043] 其中,所述步骤4采用扩展的卡尔曼滤波和改进的均值偏移算法,如图1所示,具体包括,
[0044] 步骤4.1:自动初始化稳定的新目标,确定卡尔曼滤波器的初始状态向量;
[0045] 步骤4.2:利用初始化后的卡尔曼滤波器预测当前时刻当前帧的候选目标位置;
[0046] 步骤4.3:以卡尔曼滤波器预测的候选目标位置为均值偏移算法的迭代起始点,开始均值偏移迭代过程,直至收敛,得到预测的目标位置;
[0047] 步骤4.4:将均值偏移算法得到的预测目标位置作为卡尔曼滤波器的观测向量,对卡尔曼滤波进行更新;
[0048] 步骤4.5:利用更新后的卡尔曼滤波器,重复步骤4.2至4.4,计算出下一帧的目标位置。
[0049] 上述步骤5中,若运动目标在当前帧图像中被检测到,则保留特征匹配得到的候选目标的位置值(x1,y1),与均值偏移跟踪预测的目标位置(x2,y2)进行加权平均得到最终目标位置(x,y),
[0050] 加权平均公式: α为权值因子,取值在0-1之间;
[0051] 最终目标位置(x,y)进行IIR滤波,得到目标在当前帧的状态向量作为卡尔曼滤波器的观测向量,
[0052] IIR滤波公式: 其中β、γ为更新因子,β>0,γ>1,角标k-1表示目标在前一帧的状态值,角标k表示目标在当前帧的状态值,{x,y}表示目标位置, 为目标速度, 为目标加速度;
[0053] 若运动目标在当前帧图像中没有被检测到,则判断运动目标连续消失的图像帧数,超过设定阈值,则判定目标消失,未超过设定阈值,则假定其被遮掩,将均值偏移跟踪预测的目标位置作为遮掩时的运动目标真实值保存下来,并作为下一帧卡尔曼滤波的观测向量,如图2所示。
[0054] 具体跟踪匹配过程采用三层链表结构,第一层链表的结点含有三帧差分检测得到的分割后运动区域的位置和大小参数的特征信息,第二层链表通过与第一层链表进行一级特征匹配得到新目标;第二层链表的结点含有第一层链表结点所包含的信息以及速度和目标稳定性标志,在第二层链表中达到稳定跟踪条件的目标,传送给第三层链表,若第二层链表中目标被判定为消失,则删除此目标;第三层链表与第一层链表进行二级特征匹配,不能与第三层链表任何结点匹配的第一层链表结点为新的候选目标,加入第二层链表中,能与第三层链表结点匹配的第一层链表结点作为此结点的状态更新;所述一级特征匹配为目标件质心位置的最近邻匹配和区域色彩特征匹配的加权和,所述二级特征匹配为目标间色彩特征匹配与形状特征匹配的加权和。
[0055] 上述步骤7中的同步包括时间同步和特征同步;所述时间同步通过中央控制单元以一定频率向各个视频数据处理单元发送时间同步信号,各个视频数据处理单元以中央控制单元的时间为准来实现;所述特征同步通过目标缓冲池链来完成,所述目标缓冲池由真实特征数据缓冲区和虚拟特征数据缓冲区构成,真实特征数据缓冲区存储中央控制单元获取的来自某一视频数据处理单元的r个真实特征数据,分别表示为t、t+k1、...、t+kr-1,虚拟特征数据缓冲区累计插值或预测后的s个结果,分别表示为t′、t′+k′1、...、t′+k′s-1,属于该视频数据处理单元的n个目标缓冲池组成链式结构,具体实现包括以下步骤,[0056] S101:中央控制单元接收到任一视频数据处理单元的真实特征数据后,遍历与其连接的所有视频数据处理单元,对于与本次数据来源相匹配的视频数据处理单元,执行S102,否则执行S103,所有与其连接的视频数据处理单元都执行完毕,则继续下一轮的数据接收;
[0057] S102:遍历真实特征数据链,找到目标缓冲池链中与之相同的目标编号,以先进先出的方式更新真实特征数据缓冲区和虚拟特征缓冲区,如果目标缓冲池链中没有与之相同的目标编号,则在链中添加该目标的缓冲池并初始化,执行完毕返回S101;
[0058] S103:遍历目标缓冲池链,以本次数据的感知时间为插值自变量,以真实特征缓冲区中的数据为插值节点,执行预测算法得到虚拟特征数据,以先进先出的方式更新虚拟特征数据缓冲区,执行完毕返回S101。
[0059] 显然,所描述的实施例仅仅是本发明的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域及相关领域的普通技术人员在没有作出创造性劳动的前提下所获得的所有其他实施例,都应属于本发明保护的范围。

附图说明

[0028] 图1是目标跟踪算法流程图;
[0029] 图2是运动目标匹配处理流程图。
版权所有:盲专网 ©2023 zlpt.xyz  蜀ICP备2023003576号