• 四川郎酒股份有限公司获第十二届人民企业社会责任奖年度环保奖 2019-05-13
  • 银保监会新规剑指大企业多头融资和过度融资 2019-05-12
  • 韩国再提4国联合申办世界杯 中国网友无视:我们自己来 2019-05-11
  • 中国人为什么一定要买房? 2019-05-11
  • 十九大精神进校园:风正扬帆当有为 勇做时代弄潮儿 2019-05-10
  • 粽叶飘香幸福邻里——廊坊市举办“我们的节日·端午”主题活动 2019-05-09
  • 太原设禁鸣路段 设备在测试中 2019-05-09
  • 拜耳医药保健有限公司获第十二届人民企业社会责任奖年度企业奖 2019-05-08
  • “港独”没出路!“梁天琦们”该醒醒了 2019-05-07
  • 陈卫平:中国文化内涵包含三方面 文化复兴表现在其中 2019-05-06
  • 人民日报客户端辟谣:“合成军装照”产品请放心使用 2019-05-05
  • 【十九大·理论新视野】为什么要“建设现代化经济体系”?   2019-05-04
  • 聚焦2017年乌鲁木齐市老城区改造提升工程 2019-05-04
  • 【专家谈】上合组织——构建区域命运共同体的有力实践者 2019-05-03
  • 【华商侃车NO.192】 亲!楼市火爆,别忘了买车位啊! 2019-05-03
    • / 23
    • 下载费用:30 金币  

    重庆时时彩后二缩水器: 一种多通道光学探测系统的并行图像拼接方法、装置.pdf

    关 键 词:
    一种 通道 光学 探测 系统 并行 图像 拼接 方法 装置
      专利查询网所有资源均是用户自行上传分享,仅供网友学习交流,未经上传用户书面授权,请勿作他用。
    摘要
    申请专利号:

    CN201510762866.0

    申请日:

    2015.11.10

    公开号:

    CN106683043A

    公开日:

    2017.05.17

    当前法律状态:

    实审

    有效性:

    审中

    法律详情: 实质审查的生效IPC(主分类):G06T 3/40申请日:20151110|||公开
    IPC分类号: G06T3/40 主分类号: G06T3/40
    申请人: 中国航天科工集团第四研究院指挥自动化技术研发与应用中心
    发明人: 曹扬; 胡荣; 吴京辉; 邵光征; 周武; 魏正宜; 杨柳
    地址: 102308 北京市门头沟区石龙经济开发区永安路1号
    优先权:
    专利代理机构: 北京润泽恒知识产权代理有限公司 11319 代理人: 苏培华
    PDF完整版下载: PDF下载
    法律状态
    申请(专利)号:

    CN201510762866.0

    授权公告号:

    |||

    法律状态公告日:

    2017.06.09|||2017.05.17

    法律状态类型:

    实质审查的生效|||公开

    摘要

    本申请提供了一种多通道光学探测系统的并行图像拼接方法,属于图像处理领域,包括:对采集的图像按照设定的降采样比例进行预处理,得到降采样的待拼接图像;从所述待拼接图像中选择基准图像,并设置所述待拼接图像的拼接顺序;按照设定的拼接顺序,分别提取相邻的所述待拼接图像的特征,并进行筛选,确定优选特征点对信息和所述优选特征点对信息对应的所述每组待拼接图像的变换矩阵;按照设定的拼接顺序,计算每一待拼接图像相对于基准图像的变换矩阵;根据所述每一待拼接图像相对于基准图像的变换矩阵,拼接所有待拼接图像。通过本申请公开的方法,实现了待拼接图像至基准图像的并行拼接,进一步提高了拼接效率。

    权利要求书

    1.一种多通道光学探测系统的并行图像拼接方法,其特征在于,包括:
    对采集的图像按照设定的降采样比例进行预处理,得到降采样的待拼接
    图像;
    从所述待拼接图像中选择基准图像,并设置所述待拼接图像的拼接顺
    序;
    按照设定的拼接顺序,分别提取相邻的所述待拼接图像的特征,得到每
    组待拼接图像的候选特征点对信息;
    对所述候选特征点对信息进行筛选,确定优选特征点对信息和所述优选
    特征点对信息对应的所述每组待拼接图像的变换矩阵;
    按照设定的拼接顺序,计算每一待拼接图像相对于基准图像的变换矩
    阵;
    根据所述每一待拼接图像相对于基准图像的变换矩阵,拼接所有待拼接
    图像。
    2.如权利要求1所述的并行图像拼接方法,其特征在于,所述从所述
    待拼接图像中选择基准图像,并设置所述待拼接图像的拼接顺序,包括:选
    择对应该多通道光学探测系统的视场中心的待拼接图像作为基准图像,以基
    准图像为中心,按照待拼接图像与基准图像的距离由小到大的顺序,两侧分
    别设置拼接的先后顺序。
    3.如权利要求2所述的并行图像拼接方法,其特征在于,所述按照设
    定的拼接顺序,计算每一待拼接图像相对于基准图像的变换矩阵,包括:根
    据设定的拼接顺序,将与当前待拼接图像位于所述基准图像同侧,且拼接顺
    序先于当前待拼接图像的所有待拼接图像对应的变换矩阵和当前待拼接图
    像的变换矩阵累乘,得到当前待拼接图像相对于基准图像的变换矩阵。
    4.如权利要求1所述的并行图像拼接方法,其特征在于,所述按照设定
    的拼接顺序,计算每一待拼接图像相对于基准图像的变换矩阵,包括:
    根据该多通道光学探测系统中的图像采集装置采集的待拼接图像的视场
    位置,选择对应该多通道光学探测系统的视场中心的待拼接图像作为基准图
    像,并以基准图像为中心,将待拼接图像按行划分;
    在每行图像中选择距离基准图像最近的待拼接图像作为该行的行基准图
    像;
    按照待拼接图像与行基准图像的距离由小到大的顺序,两侧分别设置待
    拼接图像的拼接先后顺序;
    按照行基准图像与基准图像的距离由小到大的顺序,两侧分别设置行基
    准图像的拼接先后顺序。
    5.如权利要求4所述的并行图像拼接方法,其特征在于,所述按照设定
    的拼接顺序,计算每一待拼接图像相对于基准图像的变换矩阵,包括:
    根据设定的拼接顺序,将与当前待拼接图像位于同一行内,且在该行的
    行基准图像同侧,且拼接顺序先于当前待拼接图像的所有待拼接图像对应的
    变换矩阵和当前待拼接图像的变换矩阵累乘,得到当前待拼接图像相对于该
    行的行基准图像的变换矩阵;
    将与所述该行的行基准图像位于基准图像同侧,且拼接顺序先于所述该
    行的行基准图像的所有行基准图像的变换矩阵和当前待拼接图像相对于所
    述该行的行基准图像的变换矩阵累乘,得到当前待拼接图像相对于基准图像
    的变换矩阵。
    6.如权利要求1所述的并行图像拼接方法,其特征在于,所述方法还
    包括:确定待拼接图像的拼接区域为相邻待拼接图像的重叠区域;
    所述按照设定的拼接顺序,分别提取相邻的所述待拼接图像的特征,得
    到每组待拼接图像的候选特征点对信息,进一步包括:
    按照设定的拼接顺序,分别提取相邻的所述待拼接图像的拼接区域的特
    征,得到每组待拼接图像的候选特征点对信息。
    7.如权利要求1至6任一项所述的并行图像拼接方法,其特征在于,所
    述方法还包括:根据所述多通道光学探测系统拼接一帧图像的时间和设置的
    显示帧率,自动设置降采样比例。
    8.一种多通道光学探测系统的并行图像拼接装置,其特征在于,包括:
    降采样???,用于对采集的图像按照设定的降采样比例进行预处理,得
    到降采样的待拼接图像;
    拼接顺序设置???,用于从所述待拼接图像中选择基准图像,并设置所
    述待拼接图像的拼接顺序;
    特征提取???,用于按照设定的拼接顺序,分别提取相邻的所述待拼接
    图像的特征,得到每组待拼接图像的候选特征点对信息;
    特征筛选???,用于对所述候选特征点对信息进行筛选,确定优选特征
    点对信息和所述优选特征点对信息对应的所述每组待拼接图像的变换矩阵;
    拼接参数计算???,用于按照设定的拼接顺序,计算每一待拼接图像相
    对于基准图像的变换矩阵;
    根据所述每一待拼接图像相对于基准图像的变换矩阵,拼接所有待拼接
    图像。
    9.如权利要求8所述的并行图像拼接装置,其特征在于,所述拼接顺
    序设置??榫咛逵糜?,选择对应该多通道光学探测系统的视场中心的待拼接
    图像作为基准图像,以基准图像为中心,按照待拼接图像与基准图像的距离
    由小到大的顺序,两侧分别设置拼接的先后顺序。
    10.如权利要求9所述的并行图像拼接装置,其特征在于,所述拼接参
    数计算??榫咛逵糜?,根据设定的拼接顺序,将与当前待拼接图像位于所述
    基准图像同侧,且拼接顺序先于当前待拼接图像的所有待拼接图像对应的变
    换矩阵和当前待拼接图像的变换矩阵累乘,得到当前待拼接图像相对于基准
    图像的变换矩阵。
    11.如权利要求8所述的并行图像拼接装置,其特征在于,所述拼接顺
    序设置??榫咛逵糜?,
    根据该多通道光学探测系统中的图像采集装置采集的待拼接图像的视场
    位置,选择对应该多通道光学探测系统的视场中心的待拼接图像作为基准图
    像,并以基准图像为中心,将待拼接图像按行划分;
    在每行图像中选择距离基准图像最近的待拼接图像作为该行的行基准图
    像;
    按照待拼接图像与行基准图像的距离由小到大的顺序,两侧分别设置待
    拼接图像的拼接先后顺序;
    按照行基准图像与基准图像的距离由小到大的顺序,两侧分别设置行基
    准图像的拼接先后顺序。
    12.如权利要求11所述的并行图像拼接装置,其特征在于,所述拼接参
    数计算??榫咛逵糜?,
    根据设定的拼接顺序,将与当前待拼接图像位于同一行内,且在该行的
    行基准图像同侧,且拼接顺序先于当前待拼接图像的所有待拼接图像对应的
    变换矩阵和当前待拼接图像的变换矩阵累乘,得到当前待拼接图像相对于该
    行的行基准图像的变换矩阵;
    将与所述该行的行基准图像位于基准图像同侧,且拼接顺序先于所述该
    行的行基准图像的所有行基准图像的变换矩阵和当前待拼接图像相对于所
    述该行的行基准图像的变换矩阵累乘,得到当前待拼接图像相对于基准图像
    的变换矩阵。

    说明书

    一种多通道光学探测系统的并行图像拼接方法、装置

    技术领域

    本申请涉及图像处理领域,特别是涉及一种多通道光学探测系统的并行
    图像拼接方法及装置。

    背景技术

    在军、民等众多应用领域,都对大视场、高分辨率光学探测系统有着强
    烈的需求。为了解决传统的可见光侦察探测装置受技术水平的限制以及物理
    原理的约束,高的角分辨率和大的视场角不能兼顾,无法可靠实现大范围目
    标探测识别的问题,研究人员开展了基于仿生复眼技术的多通道光学探测系
    统的研究,并且取得了一定的成绩。

    多通道光学探测系统有着大视场角、高分辨率等优势,能够在一定程度
    上解决典型光学侦察探测系统的问题。其系统主要构成包括多个用于拍摄目
    标区域图像的图像采集装置(例如:高分辨相机)、图像拼接装置、图像显
    示装置,其中,图像拼接装置用于对多个通道采集的图像进行拼接处理,是
    多通道光学探测系统的核心部件。在多通道光学探测系统实际应用中,往往
    需要图像拼接装置将多通道光学系统获取到的多幅图像合成一幅大图,并以
    一定帧频显示。

    基于不变特征的图像拼接方法是一种公认的较为可靠的图像拼接方法。
    然而在实际应用,现有方法存在一定问题,其计算效率、拼接精度还有待进
    一步提高。对于典型的基于不变特征的图像拼接方法,现有技术中进行图像
    拼接采用的根据拼接顺序依次拼接的串行拼接方式,如先拼接第二幅图像和
    第一幅图像,再将第三副图像拼接至第一、二幅图像拼接后的图像上,拼接
    效率低。

    因此,需要本领域技术人员迫切解决的一个技术问题就是:如何提高图
    像的拼接效率。

    发明内容

    本申请所要解决的技术问题是提供一种多通道光学探测系统的图像拼
    接方法,能够提高拼接图像的效率。

    为了解决上述问题,本申请公开了一种多通道光学探测系统的并行图像
    拼接方法,包括:对采集的图像按照设定的降采样比例进行预处理,得到降
    采样的待拼接图像;从所述待拼接图像中选择基准图像,并设置所述待拼接
    图像的拼接顺序;按照设定的拼接顺序,分别提取相邻的所述待拼接图像的
    特征,得到每组待拼接图像的候选特征点对信息;对所述候选特征点对信息
    进行筛选,确定优选特征点对信息和所述优选特征点对信息对应的所述每组
    待拼接图像的变换矩阵;按照设定的拼接顺序,计算每一待拼接图像相对于
    基准图像的变换矩阵;根据所述每一待拼接图像相对于基准图像的变换矩
    阵,拼接所有待拼接图像。

    其中,所述从所述待拼接图像中选择基准图像,并设置所述待拼接图像
    的拼接顺序,包括:选择对应该多通道光学探测系统的视场中心的待拼接图
    像作为基准图像,以基准图像为中心,按照待拼接图像与基准图像的距离由
    小到大的顺序,两侧分别设置拼接的先后顺序。

    进一步的,所述按照设定的拼接顺序,计算每一待拼接图像相对于基准
    图像的变换矩阵,包括:根据设定的拼接顺序,将与当前待拼接图像位于所
    述基准图像同侧,且拼接顺序先于当前待拼接图像的所有待拼接图像对应的
    变换矩阵和当前待拼接图像的变换矩阵累乘,得到当前待拼接图像相对于基
    准图像的变换矩阵。

    进一步的,所述按照设定的拼接顺序,计算每一待拼接图像相对于基准
    图像的变换矩阵,包括:根据该多通道光学探测系统中的图像采集装置采集
    的待拼接图像的视场位置,选择对应该多通道光学探测系统的视场中心的待
    拼接图像作为基准图像,并以基准图像为中心,将待拼接图像按行划分;在
    每行图像中选择距离基准图像最近的待拼接图像作为该行的行基准图像;按
    照待拼接图像与行基准图像的距离由小到大的顺序,两侧分别设置待拼接图
    像的拼接先后顺序;按照行基准图像与基准图像的距离由小到大的顺序,两
    侧分别设置行基准图像的拼接先后顺序。

    所述按照设定的拼接顺序,计算每一待拼接图像相对于基准图像的变换
    矩阵,包括:根据设定的拼接顺序,将与当前待拼接图像位于同一行内,且
    在该行的行基准图像同侧,且拼接顺序先于当前待拼接图像的所有待拼接图
    像对应的变换矩阵和当前待拼接图像的变换矩阵累乘,得到当前待拼接图像
    相对于该行的行基准图像的变换矩阵;将与所述该行的行基准图像位于基准
    图像同侧,且拼接顺序先于所述该行的行基准图像的所有行基准图像的变换
    矩阵和当前待拼接图像相对于所述该行的行基准图像的变换矩阵累乘,得到
    当前待拼接图像相对于基准图像的变换矩阵。

    在本申请的另一实施例中,所述方法还包括:确定待拼接图像的拼接区
    域为相邻待拼接图像的重叠区域;所述按照设定的拼接顺序,分别提取相邻
    的所述待拼接图像的特征,得到每组待拼接图像的候选特征点对信息,进一
    步包括:按照设定的拼接顺序,分别提取相邻的所述待拼接图像的拼接区域
    的特征,得到每组待拼接图像的候选特征点对信息。

    在本申请的又一实施例中,所述方法还包括:根据所述多通道光学探测
    系统拼接一帧图像的时间和设置的显示帧率,自动设置降采样比例。

    相应的,本申请还公开了一种多通道光学探测系统的并行图像拼接装置,
    包括:降采样???,用于对采集的图像按照设定的降采样比例进行预处理,
    得到降采样的待拼接图像;拼接顺序设置???,用于从所述待拼接图像中选
    择基准图像,并设置所述待拼接图像的拼接顺序;特征提取???,用于按照
    设定的拼接顺序,分别提取相邻的所述待拼接图像的特征,得到每组待拼接
    图像的候选特征点对信息;特征筛选???,用于对所述候选特征点对信息进
    行筛选,确定优选特征点对信息和所述优选特征点对信息对应的所述每组待
    拼接图像的变换矩阵;拼接参数计算???,用于按照设定的拼接顺序,计算
    每一待拼接图像相对于基准图像的变换矩阵;根据所述每一待拼接图像相对
    于基准图像的变换矩阵,拼接所有待拼接图像。

    进一步的,所述拼接顺序设置??榫咛逵糜?,选择对应该多通道光学探
    测系统的视场中心的待拼接图像作为基准图像,以基准图像为中心,按照待
    拼接图像与基准图像的距离由小到大的顺序,两侧分别设置拼接的先后顺
    序。

    进一步的,所述拼接参数计算??榫咛逵糜?,根据设定的拼接顺序,将
    与当前待拼接图像位于所述基准图像同侧,且拼接顺序先于当前待拼接图像
    的所有待拼接图像对应的变换矩阵和当前待拼接图像的变换矩阵累乘,得到
    当前待拼接图像相对于基准图像的变换矩阵。

    在本申请的另一实施例中,所述拼接顺序设置??榫咛逵糜?,根据该多
    通道光学探测系统中的图像采集装置采集的待拼接图像的视场位置,选择对
    应该多通道光学探测系统的视场中心的待拼接图像作为基准图像,并以基准
    图像为中心,将待拼接图像按行划分;在每行图像中选择距离基准图像最近
    的待拼接图像作为该行的行基准图像;按照待拼接图像与行基准图像的距离
    由小到大的顺序,两侧分别设置待拼接图像的拼接先后顺序;按照行基准图
    像与基准图像的距离由小到大的顺序,两侧分别设置行基准图像的拼接先后
    顺序。

    进一步的,所述拼接参数计算??榫咛逵糜?,根据设定的拼接顺序,将与当
    前待拼接图像位于同一行内,且在该行的行基准图像同侧,且拼接顺序先于
    当前待拼接图像的所有待拼接图像对应的变换矩阵和当前待拼接图像的变
    换矩阵累乘,得到当前待拼接图像相对于该行的行基准图像的变换矩阵;将
    与所述该行的行基准图像位于基准图像同侧,且拼接顺序先于所述该行的行
    基准图像的所有行基准图像的变换矩阵和当前待拼接图像相对于所述该行
    的行基准图像的变换矩阵累乘,得到当前待拼接图像相对于基准图像的变换
    矩阵。

    与现有技术相比,本申请具有以下优点:本申请在设置了所述待拼接图
    像的拼接顺序后,可以分别提取待拼接图像的特征点对和计算变换矩阵,不
    相邻的待拼接图像之间的特征提取和变换矩阵的计算没有依赖关系,有利于
    并行计算,提高拼接效率;同时,本申请通过变换矩阵的连续的乘积,实现
    了图像坐标系的传递,计算出了其他所有图像相对基准图像的变换矩阵,具
    体拼接时不需要将相邻的待拼接图像依次拼接,可以实现待拼接图像至基准
    图像的并行拼接,进一步提高了拼接效率。

    附图说明

    图1是本申请的多通道光学探测系统的并行图像拼接方法实施例一的流
    程示意图;

    图2是本申请的多通道光学探测系统采集的图像位置分布示意图;

    图3是本申请的多通道光学探测系统采集的图像位置分布另一示意图;

    图4是本申请的多通道光学探测系统的并行图像拼接方法实施例四的流
    程示意图;

    图5是本申请实施例五公开的并行图像拼接装置的结构示意图;

    图6是本申请又一实施例公开的并行图像拼接装置的结构示意图。

    具体实施方式

    为使本申请的上述目的、特征和优点能够更加明显易懂,下面结合附图
    和具体实施方式对本申请作进一步详细的说明。

    实施例一:

    参照图1,图1示出了本申请一种多通道光学探测系统的并行图像拼接
    方法实施例一的流程示意图,所述并行图像拼接方法包括以下步骤:

    步骤100,对采集的图像按照设定的降采样比例进行预处理,得到降采
    样的待拼接图像;

    步骤110,从所述待拼接图像中选择基准图像,并设置所述待拼接图像
    的拼接顺序;

    步骤130,按照设定的拼接顺序,分别提取相邻的所述待拼接图像的特
    征,得到每组待拼接图像的候选特征点对信息;

    步骤140,对所述候选特征点对信息进行筛选,确定优选特征点对信息
    和所述优选特征点对信息对应的所述每组待拼接图像的变换矩阵;

    步骤150,按照设定的拼接顺序,计算每一待拼接图像相对于基准图像
    的变换矩阵;

    步骤160,根据所述每一待拼接图像相对于基准图像的变换矩阵,拼接
    所有待拼接图像。

    其中,步骤100具体为:

    在进行图像拼接之前,首先要对该多通道光学探测系统各通道采集的图
    像帧进行去噪处理,去除干扰噪声。对光学图像进行去噪处理可以采用现有
    技术,本申请在此不赘述。

    然后,为了减少系统进行图像拼接计算量,同时又保证处理的图像不失
    真,需要对去噪处理后的图像降采样,得到将采样图像。具体实施时,可以
    根据预设的降采样比例T对多通道光学探测系统采集的图像进行降采样处
    理。其中,图像降采样比例即降采样倍数T,根据输出的待显示帧频、多通
    道光学探测系统的计算性能、多通道光学探测系统采集的图像的分辨率计算
    得到,可以预先设置。例如:若用户所需的显示图像帧频较高、且该多通道
    光学探测系统的计算性能一般,则需要对采集的图像进行大倍数的降采样,
    以多通道光学探测系统采用的图像采集装置为7路500万像素的相机为例,若
    要求输出的显示帧频是每秒5帧、用HPZ820工作站作为计算设备,其采用
    E5-2690处理器、ECC DDR3 1600MHz,根据经验验证,需要对采集的图像
    进行4倍降采样处理,即降采样后的图像边长变为了原始采集图像的1/4,单
    路图像仅约30多万像素。对采集的图像进行降采样处理,可以有效降低图像
    拼接、显示的运算量。若原始采集图像长方向、宽方向像素数分别为X、Y,
    图像降采样后的得到的降采样图像长方向、宽方向像素数变为ceil(X/T)、
    ceil(Y/T),其中ceil为向上取整函数。

    上述步骤110中,为了提高图像拼接的效率,本申请需要选择一幅基准
    图像,然后以所述基准图像为标准,分别计算其他待拼接图像相对于基准图
    像的拼接信息,便于并行执行图像拼接?;纪枷窨梢匀宋瓒?。待拼接图
    像的拼接顺序可以人为根据经验设定,例如可以按照多通道光学探测系统的
    图像采集装置采集的待拼接图像的视场位置,按照从左到右、从上至下的顺
    序设置各图像采集装置采集的图像的拼接顺序。以多通道光学探测系统包括
    5路图像采集装置为例,如图2所示,5路图像采集装置采集的待拼接图像分
    为别:P1、P2、P3、P4、P5,各待拼接图像的拼接顺序可以设置为:P1为
    基准图像,P2和P1拼接、P3和P2拼接、P4和P3拼接、P5和P4拼接。优选的,
    根据该多通道光学探测系统中的图像采集装置采集的待拼接图像的视场位
    置,按照由中心至周边的位置关系设置每一所述待拼接图像的拼接顺序,具
    体实施时,可以根据各图像采集装置的安装位置确定视场位置。选择对应该
    多通道光学探测系统的视场中心的待拼接图像作为基准图像,以基准图像为
    中心,按照待拼接图像与基准图像的距离由小到大的顺序,两侧分别设置拼
    接的先后顺序,与基准图像距离越小的待拼接图像先拼接。以图2为例,选
    择位于视场中心的P3作为基准图像,按照待拼接图像与基准图像的距离由小
    到大的顺序,两侧分别设置的拼接顺序为:P4和P3拼接、P5和P4拼接;P2
    和P3拼接、P1和P2拼接。待拼接图像的拼接顺序可以通过设置拼接顺序序号
    来标记,根据该拼接顺序序号索引某一待拼接图像拼接的目标图像,即记录
    一组待拼接图像的标识,如:P3的拼接顺序序号为0,不需要拼接;P4的拼
    接顺序序号为1,需要和P3拼接,如下表所示:

    待拼接图像
    P1
    P2
    P3
    P4
    P5
    拼接顺序序号
    4
    2
    0
    1
    3
    相邻待拼接图像
    P2
    P3
    -
    P3
    P4

    具体实施时,为了计算方便,基准图像的拼接顺序序号设置为最小值,
    在设置其他待拼接图像的拼接顺序序号时,以基准图像为中心,两侧的待拼
    接图像的拼接顺序序号分别设置为奇数和偶数,按照与基准图像的距离从小
    到大的距离顺序编号,编号越小越先拼接。此处仅是举例说明拼接顺序的表
    示方式,本申请对拼接顺序的表示方法不做限定。

    基于不变特征的图像拼接方法,需要对待拼接的图像提取不变特征,得
    到候选特征点的特征描述及其对应的在各自图像上的坐标信息,根据图像特
    征描述的匹配度,确定图像拼接用的特征点对,来完成两幅图像的拼接。因
    此,上述步骤130中,按照步骤110中设定的拼接顺序,分别提取相邻的待拼
    接图像的特征,然后对提取的特征进行匹配运算,得到每组所述待拼接图像
    的候选特征点对信息。本实施例以提取P3和P4的候选特征点对信息为例进行
    说明。

    本申请基于不变特征进行图像拼接,提取图像的不变特征的方法有很
    多,如:尺度不变特征转换(Scale Invariant Feature Transform,SIFT)方法、
    SURF(Speeded Up Robust Features)特征提取方法等;不同的特征提取方法
    得到的“特征描述”有一定差异,因此特征点匹配的方法也会稍许差异。本
    申请对不变特征的提取和匹配的具体方法不做限定。在本申请的实施例中,
    以使用尺度不变特征转换(SIFT)方法为例,说明对待拼接图像的特征提取
    过程,以“最近距离比次近距离方法”为例来描述特征匹配的运算的过程。

    待拼接图像P3用i表示、待拼接图像P4用j表示,利用SIFT算法分别对
    图像i与图像j的拼接区域进行特征提取,得到候选特征点的特征描述及其对
    应的在各自图像上的坐标信息。

    假设图像i的拼接区域为i',图像j的拼接区域为j′。利用SIFT算法对i'、
    j′进行特征提取,得到候选特征点特征描述集合:


    其中Featurei'、Featurej'分别为i'、j'上提取出的候选特征点的特征描述集
    合;Fp为i'上提取出的第p个候选特征点的特征描述,Fp为一个128维的向量,
    Fp=(fp1,fp2,...,fp128);Mq为j'上提取出的第q个候选特征点的特征描述,Mq为
    一个128维的向量,Mq=(mq1,mq2,...,mq128);P、Q分别为i'、j'上提取出的候选
    特征点的数目,P、Q为正整数。

    然后,对提取的候选特征点进行特征匹配运算,得到候选特征点对。

    本发明实施例中采用“最近距离比次近距离”方法,基于求解出的候选
    特征点的特征描述,进行候选特征点匹配,得到候选特征点对。

    计算Featurei'中每一个特征描述与Featurej'中每一个特征描述之间的距
    离,以特征描述Fp和特征描述Mq为例,其二者之间距离的计算公式如下:


    Dis(Fp,Mq)为特征描述Fp和特征描述Mq之间的距离。

    对于Featurei'中的一个特征描述Fp,分别计算其与Featurej'中每一个特征
    描述的距离,计算得到Featurej'中距离Fp最近的特征描述为MH,1≤H≤Q,其
    中,H为正整数;距离Fp次近的特征描述为MS,1≤S≤Q,其中,S为正整数。
    如果满足最近距离与次近距离的比小于或等于设定的阈值,如0.7,即
    Dis(Fp,MH)/Dis(Fp,MS)≤0.7,则认为Fp与MH为一对匹配的特征描述,此时,
    Fp、MH对应的图像i的拼接区域i'、图像j的拼接区域j'上的像素点即为求
    解出的一对候选特征点对。上述设定的阈值可以取小于1的任意正数,如果
    希望置信率高,可以取更小的数。

    基于上述方法求出i'、j′上的全部候选特征点对,得到图像i和图像j的
    全部候选特征点对。

    通过上述方法分别得到待拼图像的候选特征点对集合。若以图2所示的
    待拼接图像为例,步骤130中将得到4组候选特征点对集合,包括:P4和基准
    图像P3的候选特征点对集合F'1->0、P2和P3的候选特征点对集合F'2->0、P5和
    P4的候选特征点对集合F'3->1、P1和P2的候选特征点对集合F'4->2。集合中的
    元素包括:候选特征点的特征描述及其对应的在各自图像上的坐标信息。

    本实施例中,待拼接图像的拼接区域可以为待拼接图像的全部区域,也
    可以是待拼接图像的部分区域。若拼接区域是待拼接图像的部分区域,则需
    要设定待拼接区域的尺寸。

    上述步骤140,为了进一步减小拼接运算量,并提高拼接精度,对所述
    候选特征点对信息进行进一步筛选,确定优选特征点对信息,并确定所述优
    选特征点对信息对应的每组所述待拼接图像的变换矩阵。本实施例中,基于
    优选特征点对与变换矩阵方法对候选特征点对进行筛选,得到优选特征点对
    与相应的优选变换矩阵。

    具体实施时,利用随机抽样一致性(Random Sample Consensus,
    RANSAC)算法,优选特征点对与变换矩阵。以下仍是以图像i、j为例说明
    确定优选特征点对信息和变换矩阵的具体方法。

    某一对候选特征点对在图像i、图像j上的坐标分别为(x,y)、(x',y'),其
    中,(x,y)与(x',y')之间满足以下变换关系:


    Matrix为图像i、图像j之间的变换矩阵,为3×3的矩阵,每一对特征点
    对都能够列出一个如公式(3)所示的方程。

    首先,从图像i、图像j候选特征点对中随机选取4对候选特征点对,利
    用公式(3)计算图像i与图像j之间的变换矩阵Matrix。

    然后,基于计算出的变换矩阵Matrix,求解内点集合。

    (Nx',Ny')和(Mx,My)为一个候选特征点对对应在图像j、图像i中的坐标,
    首先,利用求解出的变换矩阵Matrix,求解(Nx',Ny')在图像i中对应的实算坐
    标,计算公式如下:


    其中(Nx,Ny)为(Nx',Ny')对应在图像i中的实算坐标,计算并记录(Nx,Ny)与
    (Mx,My)的欧式距离d1。

    同理,求解(Mx,My)在图像j中对应的实算坐标,计算公式如下:


    其中Matrix-1为变换矩阵Matrix的逆矩阵,(Mx',My')为(Mx,My)对应在图像j
    中的实算坐标。计算并记录(Mx',My')与(Nx',Ny')的欧式距离d2,将d1与d2之
    和作为此候选特征点是否为内点的判断依据,当(d1+d2)≤Th时则认为该候选
    特征点对为内点,Th设定为1,为经验值,可根据需求设定。

    基于变换矩阵Matrix、利用上述方法,判断图像i、图像j全部候选特征
    点对中内点的数目Number,并记录内点构成的集合。

    最后,求解优选变换矩阵与优化特征点对。设置循环次数为SN,例如:
    SN=1000,循环执行从图像i、图像j候选特征点对中随机选取4对候选特征
    点对,利用公式(3)计算图像i与图像j之间的变换矩阵Matrix和基于计算
    出的变换矩阵Matrix,求解内点集合的步骤,则元素数目最多的内点集合对
    应的变换矩阵,即为优选变换矩阵,此时内点集合内的候选特征点对为优选
    特征点对。其中,循环次数SN为经验值,根据需求确定。优选的,循环次
    数SN大于拼接区域的像素点个数/4。

    通过上述步骤140,可以得到所有相邻待拼接图像的优选特征点对的集合
    和每组待拼接图像的变换矩阵,若以图2所示的待拼接图像为例,经过步骤
    140对候选特征点对集合F'1->0、F'2->0、F'3->1、F'4->2进行筛选,将得到4组
    优选特征点对集合F1->0、F2->0、F3->1、F4->2和4个变换矩阵Matrix1->0、
    Matrix2->0、Matrix3->1、Matrix4->2,分别对应:P4和基准图像P3的拼接参数、
    P2和基准图像P3的拼接参数、P5和P4的拼接参数、P1和P2的拼接参数,
    其中的2->0表示带拼接图像的拼接顺序序号和拼接关系。

    上述步骤150中,根据设定的拼接顺序,将与当前待拼接图像位于所述
    基准图像同侧,且拼接顺序先于当前待拼接图像的所有待拼接图像对应的变
    换矩阵和当前待拼接图像的变换矩阵累乘,得到当前待拼接图像相对于基准
    图像的变换矩阵,通过本方法计算待拼接图像相对于基准图像的拼接矩阵,
    充分融合了其他待拼接图像的特征,拼接精度更高。例如:MatrixA→A-1对为
    拼接顺序序号为A的待拼接图像相对于拼接顺序序号为A-1的待拼接图像的
    变换矩阵,拼接顺序序号为A的待拼接图像相对于基准图像的变换矩阵为:
    MatrixA→0=Matrix1→0×...×MatrixA-1→A-2×MatrixA→A-1;其中,Matrix1→0是与
    基准图像距离最近(即最先拼接)的待拼接图像相对于基准图像的变换矩阵,
    MatrixA→A-1是拼接顺序序号为A的待拼接图像相对于拼接顺序序号为A-1的
    待拼接图像的变换矩阵。仍以图2所示的待拼接图像为例进行说明。没有拼
    接顺序先于图像P4且与P4在基准图像同侧的图像,因此,图像P4相对于
    基准图像P3的变换矩阵为Matrix1->0;拼接顺序先于图像P5且与P5在基准
    图像同侧的图像有P4,因此,图像P5相对于基准图像P3的变换矩阵
    Matrix3->0为图像P5和图像P4的变换矩阵的累乘,即
    Matrix3->0=Matrix3->1×Matrix1->0;没有拼接顺序先于图像P2且与P2在基
    准图像同侧的图像,因此,图像P2相对于基准图像P3的变换矩阵为
    Matrix2->0;拼接顺序先于图像P1且与P1在基准图像同侧的图像有P2,因
    此,图像P1相对于基准图像P3的变换矩阵Matrix4->0为图像P1和图像P2
    的变换矩阵的累乘,即Matrix4->0=Matrix4->2×Matrix2->0。

    上述步骤160中,根据所述每一待拼接图像相对于基准图像的变换矩阵,
    将所有待拼接图像拼接至基准图像,得到最终的拼接图像。

    本申请的实施例通过对采集的图像按照设定的降采样比例进行预处理,
    得到降采样的待拼接图像;并从所述待拼接图像中选择基准图像,然后设置
    所述待拼接图像的拼接顺序;按照设定的拼接顺序,分别提取相邻的所述待
    拼接图像的特征,得到每组待拼接图像的候选特征点对信息;再对所述候选
    特征点对信息进行筛选,确定优选特征点对信息和所述优选特征点对信息对
    应的所述每组待拼接图像的变换矩阵;然后,按照设定的拼接顺序,计算每
    一待拼接图像相对于基准图像的变换矩阵;最后,根据所述每一待拼接图像
    相对于基准图像的变换矩阵,拼接所有待拼接图像,得到最终的拼接图像。

    本申请在设置了所述待拼接图像的拼接顺序后,可以分别提取待拼接图
    像的特征点对和计算变换矩阵,不相邻的待拼接图像之间的特征提取和变换
    矩阵的计算没有依赖关系,有利于并行计算,提高拼接效率;同时,本申请
    通过变换矩阵的连续的乘积,实现了图像坐标系的传递,计算出了其他所有
    图像相对基准图像的变换矩阵,具体拼接时不需要将相邻的待拼接图像依次
    拼接,可以实现待拼接图像至基准图像的并行拼接,进一步提高了拼接效率。

    实施例二:

    本申请的一个优选实施例中,所述从所述待拼接图像中选择基准图像,
    并设置所述待拼接图像的拼接顺序,进一步包括:根据该多通道光学探测系
    统中的图像采集装置采集的待拼接图像的视场位置,选择对应该多通道光学
    探测系统的视场中心的待拼接图像作为基准图像,并以基准图像为中心,将
    待拼接图像按行划分;在每行图像中选择距离基准图像最近的待拼接图像作
    为该行的行基准图像;按照待拼接图像与行基准图像的距离由小到大的顺
    序,两侧分别设置待拼接图像的拼接先后顺序,与基准图像距离越小的待拼
    接图像先拼接;按照行基准图像与基准图像的距离由小到大的顺序,两侧分
    别设置行基准图像的拼接先后顺序,与基准图像距离越小的行基准图像先拼
    接。图3是一多通道光学探测系统采集的图像的示意图,如图3所示,待拼
    接图像有8幅,选择对应该多通道光学探测系统的视场中心的待拼接图像
    P3作为基准图像,以基准图像为中心,将待拼接图像按行划分,分成4行,
    L1~L4。其中,L1行包括P4,L2行包括P2、P3、P5,L3行包括P1、P6、
    P7,L4行包括P8。在L1行图像中选择距离标准图像最近的待拼接图像P4
    作为该行的行基准图像;在L2行图像中选择距离标准图像最近的待拼接图
    像P3作为该行的行基准图像;在L3行图像中选择距离标准图像最近的待拼
    接图像P6作为该行的行基准图像;在L4行图像中选择距离标准图像最近的
    待拼接图像P8作为该行的行基准图像。以L3行待拼接图像为例,按照待拼
    接图像与行基准图像的距离由小到大的顺序,两侧分别设置待拼接图像的拼
    接先后顺序,即:P7和P6拼接;P1和P6拼接。待拼接图像的拼接顺序可
    以通过设置拼接顺序序号来标记,如下表所示:

    待拼接图像
    P1
    P6
    P7
    拼接顺序序号
    2
    0
    1
    相邻待拼接图像
    P6
    -
    P6

    再按照行基准图像与基准图像的距离由小到大的顺序,两侧分别设置行
    基准图像的拼接先后顺序:P4和P3拼接;P6和P3拼接;P8和P6拼接,待拼
    接图像的拼接顺序可以通过设置拼接顺序序号来标记,如下表所示:

    待拼接图像
    P4
    P3
    P6
    P8
    拼接顺序序号
    10
    0
    11
    13
    相邻待拼接图像
    P3
    -
    P3
    P6

    行内待拼接图像和行基准图像的特征提取和变换矩阵的生成方法参照
    实施例一中的步骤130、步骤140,此处不再赘述。

    所述按照设定的拼接顺序,计算每一待拼接图像相对于基准图像的变换
    矩阵,进一步包括:根据设定的拼接顺序,将与当前待拼接图像位于同一行
    内,且在该行的行基准图像同侧,且拼接顺序先于当前待拼接图像的所有待
    拼接图像对应的变换矩阵和当前待拼接图像的变换矩阵累乘,得到当前待拼
    接图像相对于该行的行基准图像的变换矩阵;再将与所述该行的行基准图像
    位于基准图像同侧,且拼接顺序先于所述该行的行基准图像的所有行基准图
    像的变换矩阵和当前待拼接图像相对于所述该行的行基准图像的变换矩阵
    累乘,得到当前待拼接图像相对于基准图像的变换矩阵,得到当前待拼接图
    像相对于基准图像的变换矩阵。为了便于说明,本实施例中以基准图像的拼
    接顺序序号为0,行内其他待拼接图像的拼接顺序序号在基准图像两侧分别
    为奇数(如:1、3、5….)和偶数(如:2、4、6、…A-2、A、…),行基准
    图像的拼接顺序序号在基准图像两侧分别为奇数(如:11、13、15….)和偶
    数(如:12、14、16、…(B-2)、(B)、...),为例来描述当前待拼接图像相对
    于基准图像的拼接矩阵的计算方法。若得到各行的待拼接图像的变换矩阵序
    列为{MatrixA→A-2},行基准图像的变换矩阵序列{Matrix(B)→(B-2)},其中,A、A-2、
    (B)、(B-2)为拼接顺序序号,MatrixA→A-2为将拼接顺序序号为A的图像拼接
    到拼接顺序序号为A-2的图像上所需的变换矩阵,同理有Matrix(B)→(B-2)为将拼
    接顺序序号为(B)的行基准图像拼接到拼接顺序序号为(B-2)的行基准图像
    上所需的变换矩阵。在步骤140中得到各行待拼接图像的变换矩阵序列
    {MatrixA→A-2}、和行基准图像的变换矩阵序列{Matrix(B)→(B-2)}后,根据拼接顺序,
    采用变换矩阵累乘的方法,计算某一行内拼接顺序序号为A的待拼接图像相
    对于基准图像的变换矩阵,公式表示为:

    Matrix(BM)→(0)×...×Matrix(BN-2)→(BN-4)×Matrix(BN)→(BN-2)×MatrixAN→0×.

    ..×MatrixA-2→A-4×MatrixA→A-2,其中,

    AN是当前待拼接图像(某一行内拼接顺序序号为A的待拼接图像)所在行
    内与当前待拼接图像位于行基准图像同侧,且最先拼接(即最临近行基准图
    像)的待拼接图像的拼接顺序序号,(BN)是当前行基准图像(即当前待拼接
    图像所在行上的行基准图像)相对于基准图像中的拼接顺序序号,(BM)为行
    基准图像中与当前行基准图像位于基准图像同侧,且最先拼接(即最临近基
    准图像)的行基准图像的拼接顺序序号。

    若以图3所示的待拼接图像为例,步骤140中会得到L3行的待拼接图像
    的变化矩阵序列{Matrix1→0、Matrix2→0},其中,1是L3行内待拼接图像P7
    的拼接顺序序号,2是L3行内待拼接图像P1的拼接顺序序号,0是L3行内
    行基准图像P6的拼接顺序序号;Matrix1→0是L3行内待拼接图像P7相对于
    行基准图像P6的变换矩阵,Matrix2→0是L3行内待拼接图像P1相对于行基
    准图像P6的变换矩阵。步骤140中还会得到行基准图像变化矩阵序列
    {Matrix10→0、Matrix11→0、Matrix13→11},其中,10是行基准图像P4的拼接顺
    序序号,11是行基准图像P6的拼接顺序序号,13是行基准图像P8的拼接
    顺序序号,Matrix11→0是行基准图像P6相对于基准图像P3的变换矩阵,则
    L3行待拼接图像P1相对于基准图像P3的变换矩阵为:
    Matrix2→0×Matrix11→0。

    实施例三:

    本申请的另一具体实施例中,在确定了相邻的所述待拼接图像的优选特
    征点对信息之后,还包括:对于灰度图像,根据所述待拼接图像的优选特征
    点对的灰度值计算所述待拼接图像的初始图像均衡参数;对于彩色图像,根
    据所述待拼接图像的优选特征点对的颜色信息计算所述待拼接图像的初始
    图像均衡参数;利用初始图像均衡参数,结合设定的拼接顺序,计算出每一
    待拼接图像相对基准图像的图像均衡参数。所述步骤160进一步包括,根据
    每一待拼接图像相对基准图像的图像均衡参数对所述待拼接图像进行图像
    均衡处理,根据所述每一待拼接图像相对于基准图像的变换矩阵,拼接所有
    图像均衡处理后的待拼接图像。下面分别针对待拼接图像为灰度图像和彩色
    图像两种情况为例,对初始图像均衡参数的获取方法进行说明。

    针对灰度图像,根据所述待拼接图像的优选特征点对的灰度值计算初始
    图像均衡参数,即所述每组待拼接图像的初始图像均衡参数为所述待拼接图
    像的优选特征点对对应的灰度值构成的向量的比值。具体为:图像i对应的
    灰度值矩阵为I,图像j对应的灰度值矩阵为J,若图像i与图像j上的优选
    特征点对对应的灰度值构成了向量Vi与Vj,
    n为特征点对的数量,为图像i上第s个特征点对
    对应的灰度值、为图像j上第s个特征点对对应的灰度值,根据公式Vi=KVj
    计算得到的实数K为图像j相对图像i的初始图像均衡参数。

    针对彩色图像,根据所述待拼接图像的优选特征点对的颜色信息计算初
    始图像均衡参数,即所述每组待拼接图像的颜色分量的初始图像均衡参数为
    所述待拼接图像的优选特征点对对应的各颜色分量构成的向量的比值。具体
    如下:彩色图像i对应的三维矩阵[IR,IG,IB],其中IR、IG、IB分别为图像i的
    红、绿、蓝分量,同理有彩色图像j对应的三维矩阵[JR,JG,JB],其中JR、JG、
    JB分别为图像j的红、绿、蓝分量,图像i的优选特征点对对应的图像的颜
    色信息构成了向量分别为
    图像j优选特征点对对应的图像的颜色信息构成了向量
    分别为n为
    特征点对数。分别为图像i与图像j的优选特征
    点对对应的红、绿、蓝分量的信息构成的向量,根据公式计算得到
    的实数KR为图像j相对图像i的红色分量的初始图像均衡参数;根据公式
    计算得到的实数KG为图像j相对图像i的绿色分量的初始图像均衡
    参数;根据公式计算得到的实数KB为图像j相对图像i的蓝色分量
    的初始图像均衡参数。

    利用初始图像均衡参数,结合拼接顺序,计算出其他所有待拼接图像相
    对基准图像的图像均衡参数。下面以拼接序号为:0、1、2….A的待拼接图
    像为例,来阐述拼接序号为A的待拼接图像相对于基准图像的图像均衡参
    数,其中拼接序号为0的待拼接图像为基准图像。

    对于灰度图像,定义Kseq1→seq2为拼接顺序序号为seq1的图像相对拼接顺序
    序号为seq2的图像的初始图像均衡参数,图像拼接顺序序号为A的图像相对
    基准图像的图像均衡参数为:K'=K1→0...×KA-2→A-1×KA→A-1;其中,K1→0是除
    基准图像外的首个待拼接图像相对于基准图像的初始图像均衡参数,KA→A-1
    是拼接序号为A的待拼接图像相对于拼接序号为A-1的待拼接图像的初始图
    像均衡参数。根据公式J'=K'J,得到图像均衡后的图像灰度值对应的矩阵J'。

    对于彩色图像,定义为拼接顺序序号为seq1的图像相对拼接顺序序
    号为seq2的图像的红色分量的初始图像均衡参数,图像拼接顺序序号为A的
    图像相对基准图像的红色分量的图像均衡参数为:
    其中,是首个除基准图像外的待拼接图
    像相对于基准图像的红色分量的初始图像均衡参数,是拼接序号为A
    的待拼接图像相对于拼接序号为A-1的待拼接图像的红色分量的初始图像
    均衡参数。根据公式J'R=K'RJR,得到图像均衡后的图像的红色分量的矩阵J'R。

    同理可得任意拼接顺序序号的图像相对于基准图像的绿色分量的图像均
    衡参数K'G、蓝色分量的图像均衡参数K'B,并进一步根据公式J'G=K'GJG得到
    图像均衡后的绿色分量J'G,根据公式J'B=K'BJB得到图像均衡后的图像的蓝色
    分量J'B。

    由于光照以及传感器本身的差异,多个通道获取到的图像亮度、对比度
    等有一定差距,若直接拼接,则拼接后的图像不同区域亮度、对比度等差异
    较大、拼接痕迹明显,影响实际应用,本申请采用基于特征点对信息的图像
    均衡方法,能够有效地对参与拼接的图像进行图像均衡,进而提高图像拼接
    质量,改善拼接图像的视觉效果。

    实施例四:

    基于本申请的实施例一、二、三,在本申请的另一优选实施例中,如图
    4所示,还包括:

    步骤120,确定待拼接图像的拼接区域为相邻待拼接图像的重叠区域。

    所述步骤130进一步包括,按照设定的拼接顺序,分别提取相邻的所述
    待拼接图像的拼接区域的特征,得到每组待拼接图像的候选特征点对信息。

    为了获得全面、准确的图像,多通道光学探测系统的各图像采集装置采
    集的图像通常是有部分重叠的,本实施例中,待拼接图像的拼接区域为相邻
    待拼接图像的重叠区域。例如图2中,实施例中的基准图像P3和待拼接图
    像P4的重叠区域。

    其中,相邻待拼接图像的重叠区域,根据所述多通道光学探测系统中的
    图像采集设备的拍摄视场的重叠情况确定。具体实施时,所述拼接基准图像
    和待拼接图像的重叠区域,可根据多路相机拍摄的图像之间实际重叠情况进
    行设定。若一路相机拍摄的图像一边的边长Z为,沿边长方向对应的相机视
    场角为P,此方向上与相邻相机的视场重叠角度为P‘,则此方向上拼接区域
    的图像尺寸参数为ZP‘/P。拼接区域的图像尺寸参数是指特征提取操作中,
    参与计算的图像尺寸。

    本实施例的其他步骤的具体实施方式参见实施例一。本实施例的有益效
    果:仅需要对基准图像和其他待拼接图像的图像重叠区域进行特征提取,而
    不需要向传统方法那样对基准图像和待拼接图像的全图进行特征提取,降低
    计算量,提高了拼接效率。

    实施例五:

    基于前述实施例一至实施例四,本申请公开的另一优选实施例中,为了
    适应多通道光学探测系统的计算性能的变化,本申请的另一优选实施例中,
    还包括:

    步骤170,根据所述多通道光学探测系统拼接一帧图像的时间和设置的
    显示帧率,自动设置降采样比例。当输出的待显示帧频为frame时,首先设
    置降采样倍数为T,T=1,此时多通道光学探测系统拼接一帧图像的时间为
    time,若time>1/frame,则为了满足显示需求,则需要增加多通道图像降采样
    倍数,降采样倍数T自动加1,则T=2,进行执行下一帧图像的拼接处理。
    此时多通道光学探测系统拼接一帧图像的时间为time,若此时拼接一帧图像
    的时间满足time≤1/frame,则降采样比例可以满足平滑输出显示图像帧的需
    求,完成了自适应图像降采样,降采样倍数T=2;否则将降采样倍数再自动
    加1,重复上述过程,直至满足time≤1/frame,至此完成了图像降采样倍数的
    自适应设置。

    以多通道光学探测系统采用7路500万像素的相机为例,例如,当输出的
    待显示帧频为frame(如每秒5帧),则拼接一帧图像最多只能占用
    time=1/frame(即0.2秒)秒时间。系统对图像拼接进行计时,若在time秒
    时间内,没有输出一帧图像,则自动降采样倍数增加1倍后,继续对图像拼
    接时间进行计时,直至拼接一帧图像的时间小于时间time。由于多通道光学
    探测系统的老化、变更、资源被占用等,可能导致计算性能的变化,通过本
    申请的自适应设置下采样倍数的方法,可以有效地根据系统计算性能的变
    化,及时的输出拼接图像。

    同理,为了适应由于所述多通道光学探测系统在一段时间内资源占用过
    多,在资源释放后,运算能力增强的情况,具体实施时,还可以设置一个周
    期,在设定的周期内,多通道光学探测系统拼接一帧图像的时间为time,当
    判断处理一帧图像的时间满足time≤1/2frame时,降采样的倍数自动减1,
    通过自适应调整降采样倍数,可以兼顾拼接效果和拼接效率。

    图像降采样中的重采样方法可选择线性均值、高斯均值等任意方法,本
    申请对此不作限定。

    实施例六:

    相应的,本申请还公开了一种多通道光学探测系统的图像拼接装置,如
    图5所示,包括:

    降采样???00,用于对采集的图像按照设定的降采样比例进行预处理,
    得到降采样的待拼接图像;

    拼接顺序设置???10,用于从所述待拼接图像中选择基准图像,并设
    置所述待拼接图像的拼接顺序;

    特征提取???30,用于按照设定的拼接顺序,分别提取相邻的所述待
    拼接图像的特征,得到每组待拼接图像的候选特征点对信息;

    特征筛选???40,用于对所述候选特征点对信息进行筛选,确定优选
    特征点对信息和所述优选特征点对信息对应的所述每组待拼接图像的变换
    矩阵;

    拼接参数计算???50,用于按照设定的拼接顺序,计算每一待拼接图
    像相对于基准图像的变换矩阵;

    拼接???60,用于根据所述每一待拼接图像相对于基准图像的变换矩
    阵,拼接所有待拼接图像。

    在本申请的一个实施例中,所述拼接顺序设置???10具体用于,选择
    对应该多通道光学探测系统的视场中心的待拼接图像作为基准图像,以基准
    图像为中心,按照待拼接图像与基准图像的距离由小到大的顺序,两侧分别
    设置拼接的先后顺序。

    所述拼接参数计算???50具体用于,根据设定的拼接顺序,将与当前
    待拼接图像位于所述基准图像同侧,且拼接顺序先于当前待拼接图像的所有
    待拼接图像对应的变换矩阵和当前待拼接图像的变换矩阵累乘,得到当前待
    拼接图像相对于基准图像的变换矩阵。

    在本申请的另一具体实施例中,所述拼接顺序设置???10具体用于,
    根据该多通道光学探测系统中的图像采集装置采集的待拼接图像的视场位
    置,选择对应该多通道光学探测系统的视场中心的待拼接图像作为基准图
    像,并以基准图像为中心,将待拼接图像按行划分;在每行图像中选择距离
    基准图像最近的待拼接图像作为该行的行基准图像;按照待拼接图像与行基
    准图像的距离由小到大的顺序,两侧分别设置待拼接图像的拼接先后顺序;
    按照行基准图像与基准图像的距离由小到大的顺序,两侧分别设置行基准图
    像的拼接先后顺序。

    所述拼接参数计算???50具体用于,根据设定的拼接顺序,将与当前
    待拼接图像位于同一行内,且在该行的行基准图像同侧,且拼接顺序先于当
    前待拼接图像的所有待拼接图像对应的变换矩阵和当前待拼接图像的变换
    矩阵累乘,得到当前待拼接图像相对于该行的行基准图像的变换矩阵;将与
    所述该行的行基准图像位于基准图像同侧,且拼接顺序先于所述该行的行基
    准图像的所有行基准图像的变换矩阵和当前待拼接图像相对于所述该行的
    行基准图像的变换矩阵累乘,得到当前待拼接图像相对于基准图像的变换矩
    阵。

    在本申请的又一实施例中,还包括:图像均衡参数计算???,用于对于
    灰度图像,根据所述待拼接图像的优选特征点对的灰度值计算所述待拼接图
    像的初始图像均衡参数;对于彩色图像,根据所述待拼接图像的优选特征点
    对的颜色信息计算所述待拼接图像的初始图像均衡参数;利用初始图像均衡
    参数,结合设定的拼接顺序,计算每一待拼接图像相对基准图像的图像均衡
    参数。

    所述拼接???60还用于,根据每一待拼接图像相对于基准图像的图像
    均衡参数对所述待拼接图像进行图像均衡处理;根据所述每一待拼接图像相
    对于基准图像的变换矩阵,拼接所有图像均衡处理后的待拼接图像。

    在本申请的再一实施例中,如图6所示,所述多通道光学探测系统的并
    行图像拼接装置还包括:拼接区域确定???20,用于确定待拼接图像的拼
    接区域为相邻待拼接图像的重叠区域。所述特征提取???30进一步用于:
    按照设定的拼接顺序,分别提取相邻的所述待拼接图像的拼接区域的特征,
    得到每组待拼接图像的候选特征点对信息。拼接区域确定???20的具体实
    现方式参见方法实施例,此处不再赘述。

    在本申请的再一实施例,所述多通道光学探测系统的并行图像拼接装置
    还包括:自适应降采样???,用于根据所述多通道光学探测系统拼接一帧图
    像的时间和设置的显示帧率,自动设置降采样比例。

    本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明
    的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见
    即可。对于装置实施例而言,由于其与方法实施例基本相似,所以描述的比
    较简单,相关之处参见方法实施例的部分说明即可。

    以上所描述的系统实施例仅仅是示意性的,其中所述作为分离部件说明
    的??榭梢允腔蛘咭部梢圆皇俏锢砩戏挚?,作为??橄允镜牟考梢允腔?br />者也可以不是物理???,即可以位于一个地方,或者也可以分布到多个网络
    ??樯???梢愿菔导实男枰≡衿渲械牟糠只蛘呷磕?槔词迪直臼凳├?br />方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以
    理解并实施。

    通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实
    施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬
    件实现?;谡庋睦斫?,上述技术方案本质上或者说对现有技术做出贡献+
    的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算
    机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得
    一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个
    实施例或者实施例的某些部分所述的方法。

    关于本文
    本文标题:一种多通道光学探测系统的并行图像拼接方法、装置.pdf
    链接地址://www.4mum.com.cn/p-6079419.html
    关于我们 - 网站声明 - 网站地图 - 资源地图 - 友情链接 - 网站客服 - 联系我们

    [email protected] 2017-2018 www.4mum.com.cn网站版权所有
    经营许可证编号:粤ICP备17046363号-1 
     


    收起
    展开
  • 四川郎酒股份有限公司获第十二届人民企业社会责任奖年度环保奖 2019-05-13
  • 银保监会新规剑指大企业多头融资和过度融资 2019-05-12
  • 韩国再提4国联合申办世界杯 中国网友无视:我们自己来 2019-05-11
  • 中国人为什么一定要买房? 2019-05-11
  • 十九大精神进校园:风正扬帆当有为 勇做时代弄潮儿 2019-05-10
  • 粽叶飘香幸福邻里——廊坊市举办“我们的节日·端午”主题活动 2019-05-09
  • 太原设禁鸣路段 设备在测试中 2019-05-09
  • 拜耳医药保健有限公司获第十二届人民企业社会责任奖年度企业奖 2019-05-08
  • “港独”没出路!“梁天琦们”该醒醒了 2019-05-07
  • 陈卫平:中国文化内涵包含三方面 文化复兴表现在其中 2019-05-06
  • 人民日报客户端辟谣:“合成军装照”产品请放心使用 2019-05-05
  • 【十九大·理论新视野】为什么要“建设现代化经济体系”?   2019-05-04
  • 聚焦2017年乌鲁木齐市老城区改造提升工程 2019-05-04
  • 【专家谈】上合组织——构建区域命运共同体的有力实践者 2019-05-03
  • 【华商侃车NO.192】 亲!楼市火爆,别忘了买车位啊! 2019-05-03
  • 三个色子规则 吉林快3走势图跨度和值 澳门百家樂大小玩法介绍 福利彩票快三投注稳赚技巧 重庆时时彩直播软件 2018世界杯指定体育投注网站 怎样买足球稳赚不赔 11选5胆码技巧 万彩网合法吗 大乐透综合基本走势图 重庆时时全天开奖软件 新时时几时开 新时时历史开奖信息 pk10计划软件官网 山东时时官网地址 四川时时高手群