首页 > 专利 > 杭州电子科技大学 > 一种场景目标自动分析检测处理方法及装置专利详情

一种场景目标自动分析检测处理方法及装置   0    0

有效专利 查看PDF
专利申请流程有哪些步骤?
专利申请流程图
申请
申请号:指国家知识产权局受理一件专利申请时给予该专利申请的一个标示号码。唯一性原则。
申请日:提出专利申请之日。
2018-06-15
申请公布
申请公布指发明专利申请经初步审查合格后,自申请日(或优先权日)起18个月期满时的公布或根据申请人的请求提前进行的公布。
申请公布号:专利申请过程中,在尚未取得专利授权之前,国家专利局《专利公报》公开专利时的编号。
申请公布日:申请公开的日期,即在专利公报上予以公开的日期。
2018-12-25
授权
授权指对发明专利申请经实质审查没有发现驳回理由,授予发明专利权;或对实用新型或外观设计专利申请经初步审查没有发现驳回理由,授予实用新型专利权或外观设计专利权。
2021-05-07
预估到期
发明专利权的期限为二十年,实用新型专利权期限为十年,外观设计专利权期限为十五年,均自申请日起计算。专利届满后法律终止保护。
2038-06-15
基本信息
有效性 有效专利 专利类型 发明专利
申请号 CN201810621416.3 申请日 2018-06-15
公开/公告号 CN108921053B 公开/公告日 2021-05-07
授权日 2021-05-07 预估到期日 2038-06-15
申请年 2018年 公开/公告年 2021年
缴费截止日
分类号 G06K9/00G06K9/20 主分类号 G06K9/00
是否联合申请 独立申请 文献类型号 B
独权数量 1 从权数量 2
权利要求数量 3 非专利引证数量 1
引用专利数量 0 被引证专利数量 0
非专利引证 1、CN 103743484 A,2014.04.23CN 105809159 A,2016.07.27CN 101581950 A,2009.11.18余道喜.纹理方向检测的光学实现方法研究《.中国优秀硕士学位论文全文数据库 信息科技辑》.2017,第2017年卷(第3期),;
引用专利 被引证专利
专利权维持 4 专利申请国编码 CN
专利事件 事务标签 公开、实质审查、授权
申请人信息
申请人 第一申请人
专利权人 杭州电子科技大学 当前专利权人 杭州电子科技大学
发明人 赵巨峰、华玮平、崔光茫、公晓丽、朱礼尧、林君 第一发明人 赵巨峰
地址 浙江省杭州市下沙高教园区2号大街 邮编 310018
申请人数量 1 发明人数量 6
申请人所在省 浙江省 申请人所在市 浙江省杭州市
代理人信息
代理机构
专利代理机构是经省专利管理局审核,国家知识产权局批准设立,可以接受委托人的委托,在委托权限范围内以委托人的名义办理专利申请或其他专利事务的服务机构。
杭州浙科专利事务所 代理人
专利代理师是代理他人进行专利申请和办理其他专利事务,取得一定资格的人。
杜立
摘要
本发明公开了一种场景目标自动分析检测处理方法及装置,利用光学硬件计算与软件计算相结合,直接面向自然场景分析与探测目标景物,能有效快速地获得目标探测结果。本发明包括:(1)构造傅里叶系统装置,光路搭建;(2)调整会聚球镜,使自然景物准确接入傅里叶系统;(3)控制FPGA与SLM,实现空间滤波与图像采集;(4)场景分析与目标检测计算。本发明利用光链路计算一体化思维,直接面向自然景物,即可实现场景分析与目标检测。
  • 摘要附图
    一种场景目标自动分析检测处理方法及装置
  • 说明书附图:图1
    一种场景目标自动分析检测处理方法及装置
  • 说明书附图:图2
    一种场景目标自动分析检测处理方法及装置
  • 说明书附图:图3
    一种场景目标自动分析检测处理方法及装置
法律状态
序号 法律状态公告日 法律状态 法律状态信息
1 2021-05-07 授权
2 2018-12-25 实质审查的生效 IPC(主分类): G06K 9/00 专利申请号: 201810621416.3 申请日: 2018.06.15
3 2018-11-30 公开
权利要求
权利要求书是申请文件最核心的部分,是申请人向国家申请保护他的发明创造及划定保护范围的文件。
1.一种场景目标自动分析检测处理装置的场景目标自动分析检测处理方法,所述场景目标自动分析检测处理装置,从景物端到成像端,包括底部设有机械导轨的会聚球镜,第一傅氏透镜,空间光调制器SLM,第二透镜,成像传感器CMOS,FPGA,其特征在于:所有光学与成像器件处于同一光轴上,第一傅氏透镜与第二傅氏透镜构成傅里叶系统,两透镜规格一致,焦距均为f,会聚球镜成像面、第一傅氏透镜、频谱面、第二傅氏透镜、CMOS,这五者依次之间相距为f;
其特征在于,包括以下步骤:
构造傅里叶系统,自动调整会聚球镜使自然景物准确接入傅里叶系统,在傅里叶系统的频谱面利用SLM构造空间滤波器实现空间滤波,最终在FPGA端上实现图像采集,并且计算获取探测结果;
面向具体的自然景物时,SLM全透光,FPGA上的CMOS成像传感器获取自然景物,通过梯度函数判断景物是否清晰,反馈信号指挥机械导轨沿着光轴前后移动会聚球镜,使成像清晰;成像清晰时,聚透镜将外界自然景物成像于第一傅氏透镜的前焦面,即会聚球镜成像面与第一傅氏透镜的前焦面重合,自然景物准确接入傅里叶系统;
通过FPGA编程控制SLM及CMOS,全自动地进行连续2次图像采集过程:第一次通过FPGA控制SLM,光轴中心附近通过,SLM小孔尺寸为直径Di个像素,CMOS采集图像s1; 第二次通过FPGA控制SLM构造缓变滤波器,SLM从中心像素到边缘像素,透过率从1衰减到0,即控制频谱通过的振幅的空间分布,CMOS采集图像s2;FPGA输出信号给SLM并CMOS采集图像;
在FPGA上计算获取探测结果,特征表现在:
利用获取的s1与s2,在FPGA上,计算分析图g= (s1 ‑ s2) – min((s1 ‑ s2),0),并归一化g,获得场景分析图,从视觉上获得整个目标场景的待关注程度;使用阈值处理g,即可获得目标区域,标定目标,获得最终检测结果。

2.如权利要求1所述的场景目标自动分析检测处理方法,其特征在于,所述自然景物经会聚球镜成像于傅里叶系统的第一傅氏透镜前焦面上,利用其实现傅里叶变换,呈现在频谱面上,频谱面为SLM滤波提供位置,而后继续利用第二傅氏透镜反变换到COMS成像传感器平面,实现成像采集。

3.如权利要求1所述的场景目标自动分析检测处理方法,其特征在于,所述SLM为透射式电寻址空间光调制器,其滤波器结构由FPGA给予;滤波器结构是可循环变化的。
说明书

技术领域

[0001] 本发明涉及光电成像与计算机技术领域,更具体地,涉及一种场景目标自动分析检测处理方法及装置。

背景技术

[0002] 对于场景中目标的分析与检测是图像处理、机器视觉等领域的一个重要部分。传统的场景方法往往是在图像采集完成后对图像进行后处理,分析并检测其中的目标。但是,由于成像、采集以及处理等多个过程中不可避免的噪声的引入,这些方法所得到的结果均存在一些问题,部分算法需要庞大的先验数据作为支撑,而部分方法识别结果较差或者计算速度较慢。
[0003] 目前,常用的场景目标检测方法有:
[0004] 基于特征检测目标检测方法。通过图像中多种特征的检测来判断对场景进行分割及检测,通常这种方法速度较快,但是检测的效果相对较差。基于先验知识的统计检测方法。通过将场景分解为多个维度的信息,通过大量的数据训练模型并对当前场景进行目标检测。近些年来,基于神经网络的场景目标检测方法也是基于相同的思路。但该方法不可避免的问题就是需要对场景进行大量的训练才可以得到较好的结果。基于对人眼视觉系统的研究,通过模仿视觉显著性的机制来识别场景中的目标信息。此类方法基于人眼视觉系统,相比而言最符合人眼视觉习惯,效果较好。
[0005] 需要注意的是,以上所述的多种方法几乎都是在图像采集过程结束后对图像进行后处理,耗时,并且大量的数据处理导致较为耗能。
[0006] 基于这个因素,本发明旨在提出了一种在成像过程中进行目标自动分析检测的方法及装置。通过在成像过程中进行目标检测可以有效的避免图像后处理过程中人为产生的噪声对目标检测的准确性以及可靠性的影响。使用整体光学成像链路的思路,在成像过程中进行场景目标检测,可以有效地避免后处理过程中计算时间长,计算耗能多的问题。
[0007] 名词说明:
[0008] FPGA即现场可编程门阵列。
[0009] SLM即空间光调制器。

发明内容

[0010] 本发明的目的在于提供一种场景目标自动分析检测处理方法及装置,其基于软硬计算结合的方式,旨在解决目前的场景目标分析检测纯靠算法软件而导致计算耗时多、计算耗能多等问题。
[0011] 为实现上述目的,本发明提供了一种场景目标自动分析检测处理方法及装置,主要思路体现为:构造傅里叶变换与反变换系统 (简称傅里叶系统) 装置;直接面向自然场景,大视场会聚球镜将场景成像作为傅里叶系统的输入;利用SLM构造空间滤波器而实现空间滤波;图像传感器获取信号,并使用FPGA简单计算,获得检测结果。其技术方案如下:
[0012] 1、构造傅里叶系统装置,如附图2所示,其表征的是图1中从会聚球镜到FPGA的流程对应的装置架构。所有光学与成像器件处于同一光轴上。傅氏透镜1与傅氏透镜2构成傅里叶系统,两透镜规格一致,焦距均为f。会聚球镜成像面、傅氏透镜1、频谱面、傅氏透镜2、CMOS成像传感器,这五者依次之间相距为f。于是,自然场景经会聚球镜成像于傅氏透镜1前焦面上,利用其实现傅里叶变换,呈现在频谱面上,即傅氏透镜1的后焦面且傅氏透镜2的前焦面,为SLM滤波提供位置,而后继续利用傅氏透镜2傅里叶透镜反变换到COMS成像传感器平面,实现成像采集。COMS成像传感器由FPGA支配(CMOS附着于FPGA上),FPGA能反馈信号指挥机械导轨沿着光轴前后移动会聚球镜。SLM具体的滤波器由FPGA给予。
[0013] 2、调整会聚球镜移动,实现准确成像。直接面向自然景物,会聚透镜将外界自然景物成像于傅氏透镜1的前焦面,即会聚球镜成像面与傅氏透镜1的前焦面重合。会聚透镜可沿着光轴前后移动,使其面对远近不同的自然景物时能够成像于f1的前焦面上。该会聚透镜移动调整是自动化完成的。FPGA上的CMOS成像传感器获取自然景物,通过梯度函数判断景物是否清晰,反馈信号指挥机械导轨沿着光轴前后移动会聚球镜,使成像清晰,此时SLM是全透光,未构造滤波器。
[0014] 3、空间滤波。自然景物在傅氏透镜1的后焦面上形成傅里叶频谱,利用SLM构造空间滤波器而实现空间滤波。所使用的SLM为透射式电寻址空间光调制器,因此其滤波器结构由FPGA给予。滤波器结构是可循环变化的。
[0015] 通过FPGA编程控制SLM及CMOS,全自动地进行连续2次图像采集过程。第一次通过FPGA控制SLM,光轴中心附近通过,SLM小孔尺寸为直径Di个像素, CMOS采集图像s1; 第二次通过FPGA控制SLM构造缓变滤波器,SLM从中心像素到边缘像素,透过率从1衰减到0,即控制频谱通过的振幅的空间分布,CMOS采集图像s2。FPGA输出信号给SLM并CMOS采集图像,都是程序自动化实现。
[0016] 4、图像采集与计算获取探测结果。CMOS获取信号后进入FPGA,通过FPGA对采集的时间序列上的多幅图像简单计算,获得检测结果。
[0017] 在FPGA上,计算分析图g = (s1 ‑ s2) – min((s1 ‑ s2),0),并归一化g,获得图3的中图,即场景分析图,可以从视觉上获得整个目标场景的待关注程度。使用阈值处理g,即可获得目标区域,标定目标,获得最终检测结果。
[0018] 本发明的有益效果与优势:
[0019] 现有的自然景物场景目标检测,都是基于图像算法的方法,即基于纯软件的方法,都是系统采集了图像后再进行处理检测,未能在成像链路优化的角度上实行软硬计算结合的思路。而本发明则是直接面向自然场景,融入了光学计算分析手段,而FPGA层面的算法软件所承担的任务大大减少,大大提升了计算速度,也减少了由于大量运算带来的耗能。尤其是计算速度的几何级提升,可广泛应用于安防监控、指定目标跟踪检测等具体的民用任务中。

实施方案

[0023] 为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用于解释本发明,并不用于限定本发明。
[0024] 以下结合附图实施例对本发明的实施作进一步说明。
[0025] 如图1所示,本发明的方法包括以下步骤:
[0026] 1、光路搭建。面向自然景物,如图3的左图,将光路中的各个光学与成像器件包括会聚球镜、傅式透镜1、空间光调制器(SLM)、傅式透镜2、CMOS(附着于FPGA上)如图2所示依次搭建,调整光路使各器件其位于同一光轴上。整个光路可以使得自然景物在经过会聚球镜会聚于傅式透镜前焦面中,并在傅里叶系统的频谱面中直接进行控制,最后于CMOS中采集成像结果。
[0027] 2、会聚球镜调整。通过FPGA控制SLM使其处于全透光的状态。通过FPGA控制步进电机使得会聚球镜可以沿光轴方向自由移动。为了使会聚球镜成像面与傅氏透镜1的前焦面重合,在FPGA中通过梯度函数计算由CMOS得到的成像结果,判断景物是否清晰。依据此计算结果,由FPGA控制反馈信号指挥机械导轨沿着光轴前后移动会聚球镜,自适应地使成像结果最为清晰。此时,会聚球镜的成像面即与傅式透镜1的前焦面重合,使自然景物准确接入傅里叶系统。
[0028] 3、空间滤波与图像采集。通过FPGA编程控制SLM及CMOS,全自动地进行连续2次图像采集过程。第一次通过FPGA控制SLM,光轴中心附近通过,SLM小孔尺寸为直径Di=5个像素, CMOS采集图像s1; 第二次通过FPGA控制SLM构造缓变滤波器,SLM从中心像素到边缘像素,透过率从1衰减到0,即控制频谱通过的振幅的空间分布,CMOS采集图像s2。FPGA输出信号给SLM并CMOS采集图像,都是程序自动化实现。
[0029] 4、场景分析与目标检测计算。在FPGA上,计算分析图g = (s1 ‑ s2) – min((s1 ‑ s2),0),并归一化g,获得图3的中图,即场景分析图,可以从视觉上获得整个目标场景的待关注程度。使用阈值处理g,即可获得目标区域,标定目标,获得最终检测结果,如图3右图。
[0030] 在本发明的图例中,所用到的需要指明的设备或相关参数如下:傅氏透镜焦距为f=250mm,直径为D=50mm。

附图说明

[0020] 图1为本发明的处理流程图;
[0021] 图2为本发明装置的系统构成图。
[0022] 图3为本发明面向自然场景,获取的场景分析结果,以及检测结果。
版权所有:盲专网 ©2023 zlpt.xyz  蜀ICP备2023003576号