• 四川郎酒股份有限公司获第十二届人民企业社会责任奖年度环保奖 2019-05-13
  • 银保监会新规剑指大企业多头融资和过度融资 2019-05-12
  • 韩国再提4国联合申办世界杯 中国网友无视:我们自己来 2019-05-11
  • 中国人为什么一定要买房? 2019-05-11
  • 十九大精神进校园:风正扬帆当有为 勇做时代弄潮儿 2019-05-10
  • 粽叶飘香幸福邻里——廊坊市举办“我们的节日·端午”主题活动 2019-05-09
  • 太原设禁鸣路段 设备在测试中 2019-05-09
  • 拜耳医药保健有限公司获第十二届人民企业社会责任奖年度企业奖 2019-05-08
  • “港独”没出路!“梁天琦们”该醒醒了 2019-05-07
  • 陈卫平:中国文化内涵包含三方面 文化复兴表现在其中 2019-05-06
  • 人民日报客户端辟谣:“合成军装照”产品请放心使用 2019-05-05
  • 【十九大·理论新视野】为什么要“建设现代化经济体系”?   2019-05-04
  • 聚焦2017年乌鲁木齐市老城区改造提升工程 2019-05-04
  • 【专家谈】上合组织——构建区域命运共同体的有力实践者 2019-05-03
  • 【华商侃车NO.192】 亲!楼市火爆,别忘了买车位啊! 2019-05-03
    • / 6
    • 下载费用:30 金币  

    重庆时时彩带振幅: 一种深度图像跟踪方法.pdf

    关 键 词:
    一种 深度 图像 跟踪 方法
      专利查询网所有资源均是用户自行上传分享,仅供网友学习交流,未经上传用户书面授权,请勿作他用。
    摘要
    申请专利号:

    CN200910212832.9

    申请日:

    2009.10.30

    公开号:

    CN101710426A

    公开日:

    2010.05.19

    当前法律状态:

    终止

    有效性:

    无权

    法律详情: 未缴年费专利权终止IPC(主分类):G06T 7/20申请日:20091030授权公告日:20110824终止日期:20131030|||授权|||实质审查的生效IPC(主分类):G06T 7/20申请日:20091030|||公开
    IPC分类号: G06T7/20; G06T7/00 主分类号: G06T7/20
    申请人: 无锡景象数字技术有限公司
    发明人: 戴琼海; 黎政; 曹汛; 刘晓冬; 刘磊
    地址: 214028 江苏省无锡市新区新华路5号创新创意产业园B栋1层
    优先权:
    专利代理机构: 无锡市大为专利商标事务所 32104 代理人: 曹祖良
    PDF完整版下载: PDF下载
    法律状态
    申请(专利)号:

    CN200910212832.9

    授权公告号:

    |||101710426B||||||

    法律状态公告日:

    2014.12.17|||2011.08.24|||2010.07.07|||2010.05.19

    法律状态类型:

    专利权的终止|||授权|||实质审查的生效|||公开

    摘要

    本发明公开了一种精确的深度图像跟踪的方法,属于计算机视觉立体视频领域。所述方法包括:获取两帧图像p、q以及p的深度图像,先使用改进的双边滤波算法得到q的估计深度图像,然后使用基于块匹配的运动补偿算法对q的估计深度图像进行修正,从而得到q的精确的深度图像。本发明可以得到很精确的深度图像,从而提高了立体视频制作的效率。

    权利要求书

    1: 一种深度图像跟踪方法,其特征是: 首先获取两帧图像p、q以及图像p的深度图像; 然后使用改进的双边滤波算法求得图像q的估计深度图像; 再使用基于块匹配的运动补偿算法对所述图像q的估计深度图像进行运动补偿修正,得到精确的图像q的深度图像。
    2: 如权利要求1所述的深度图像跟踪方法,其特征是所述改进的双边滤波算法步骤如下: a)计算图像q中点(i,j)的深度时,选取图像p中以坐标为(i,j)的点为中心,输入参数wsize为边长的正方形范围内的点(m,n),计算图像p中点(m,n)与图像q中点(i,j)的颜色差clr_dist2;所述颜色差clr_dist2定义为RGB空间的欧氏距离的平方; b)如果所述颜色差clr_dist2小于给定的阈值MAX_CLR_DIF,则根据该颜色差计算点(m,n)的权值: weight(m,n,i,j)=exp[-clr_dist2/(alpha*alpha)]*[1/(clr_dist2/(256*256)+1)]; 其中exp[-clr_dist2/(alpha*alpha)]是按照以e为底指数分布的权重分量,[1/(clr_dist2/(256*256)+1)]是按照双曲线分布的权重分量; c)如果所述颜色差clr_dist2大于阈值MAX_CLR_DIF,则不予计算权值,权值默认为0,即过滤掉该点; d)对图像p中所述正方形范围内每一个点的深度按照该点权重加权平均,得到图像q中点(i,j)的估计深度值。
    3: 如权利要求1所述的深度图像跟踪方法,其特征是所述基于块匹配的运动补偿算法步骤如下: a)将图像q的估计深度图像分为大小相同的小块; b)对于图像q的估计深度图像中的一个块,称为当前块,在图像p的深度图像中找到与当前块最相似的块;相似度度量函数为:cost=sum_b(clr_dist*dep_dist),即对图像p的深度图像中的块内的每一点计算颜色距离和深度距离的乘积,然后对所述图像p的深度图像中的块内所有点的所述乘积求和,cost越小表示越相似;所述颜色距离指图像p的深度图像中的块与所述当前块中对应点的颜色距离,所述深度距离指图像p的深度图像中的块与所述当前块中对应点的深度距离; c)用图像p的深度图像中最相似的块的每一点的深度替代图像q的估计深度图像的当前块中对应点的深度。

    说明书


    一种深度图像跟踪方法

        【技术领域】

        本发明涉及一种立体视频制作中密集深度图像跟踪的方法,属于计算机视觉立体视频领域。

        背景技术

        随着计算机技术的发展,平面视频已经不能满足人们对世界表述的需要,立体视频的研究成为热点。

        立体视频与普通的平面视频的最大不同点就在于立体视频包含了深度信息,也就是视频中对象离观察者的远近距离,而这在平面视频中是不可能办到的。然而在立体视频的制作中,深度图像的获取的代价也是很高的,所以研究如何利用有限的深度图像而得到更多的深度图像就显得很有必要。

        目前的深度图像跟踪方法主要有两种,运动估计法和双边滤波法。其中运动估计法又包括基于运动图像专家组(MPEG)标准的块匹配法和光流法??槠ヅ浞ň褪茄罢蚁嗔诹椒枷裰邢嗨频目?,根据相似块之间的位置差异(即运动)而得到深度图像中相应的块在下一帧中的位置。而光流法是利用图像像素点的时域变化来确定每个点的运动,光流法的计算结果就是图像中每一个点的运动矢量,根据每个点的运动矢量来确定当前帧的深度图像中一点在下一帧中的位置。双边滤波法是对当前帧中一点周围一定范围的每个像素计算一个权值,根据计算出的权值和当前帧深度图像中该范围内每个点的深度得到下一帧中该点的深度。

        在本发明的实施过程中,发明人发现现有的技术存在以下的问题:由基于块匹配的运动估计法所跟踪得到的深度图存在很大的块效应,往往使得对象的边界变得曲曲折折,而基于光流法的运动估计方法所得到的深度图存在误匹配点,使得对象的边缘附近存在很多“雪花点”。现有的双边滤波法不存在块效应和误匹配的问题,但是它会使得对象的边缘模糊,比较明显的是出现像“彗尾”一样的狭长过渡区。

        【发明内容】

        本发明的目的是克服现有技术中存在的不足,提供一种精确的深度图像跟踪方法,使得深度跟踪的结果更精确。

        按照本发明提供的技术方案,所述深度图像跟踪方法,首先获取两帧图像p、q以及图像p的深度图像;然后使用改进的双边滤波算法求得图像q的估计深度图像;再使用基于块匹配的运动补偿算法对所述图像q的估计深度图像进行运动补偿修正,得到精确的图像q的深度图像。

        所述改进的双边滤波算法步骤如下:

        a)计算图像q中点(i,j)的深度时,选取图像p中以坐标为(i,j)的点为中心,输入参数wsize为边长的正方形范围内的点(m,n),计算图像p中点(m,n)与图像q中点(i,j)的颜色差clr_dist2;所述颜色差clr_dist2定义为RGB空间的欧氏距离的平方;

        b)如果所述颜色差clr_dist2小于给定地阈值MAX_CLR_DIF,则根据该颜色差计算点(m,n)的权值

        weight(m,n,i,j)=exp[-clr_dist2/(alpha*alpha)]*[1/(clr_dist2/(256*256)+1)];

        其中exp[-clr_dist2/(alpha*alpha)]是按照以e为底指数分布的权重分量,[1/(clr_dist2/(256*256)+1)]是按照双曲线分布的权重分量;

        c)如果所述颜色差clr_dist2大于阈值MAX_CLR_DIF,则不予计算权值,权值默认为0,即过滤掉该点;

        d)对图像p中所述正方形范围内每一个点的深度按照该点权重加权平均,得到图像q中点(i,j)的估计深度值。

        所述基于块匹配的运动补偿算法步骤如下:

        a)将图像q的估计深度图像分为大小相同的小块;

        b)对于图像q的估计深度图像中的一个块,称为当前块,在图像p的深度图像中找到与当前块最相似的块;相似度度量函数为:cost=sum_b(clr_dist*dep_dist),即对图像p的深度图像中的块内的每一点计算颜色距离和深度距离的乘积,然后对所述图像p的深度图像中的块内所有点的所述乘积求和,cost越小表示越相似;所述颜色距离指图像p的深度图像中的块与所述当前块中对应点的颜色距离,所述深度距离指图像p的深度图像中的块与所述当前块中对应点的深度距离;

        c)用图像p的深度图像中最相似的块的每一点的深度替代图像q的估计深度图像的当前块中对应点的深度。

        本发明的优点是:本发明结合了双边滤波和运动补偿,可以避免块效应和雪花点效应,而且对双边滤波的模糊效应也有很大的改善效果,可以得到很精确的深度图像,提高了立体视频制作的效率。

        【附图说明】

        图1是本发明的示意图。

        图2是本发明的流程图。

        【具体实施方式】

        下面结合附图和实施例对本发明作进一步说明。

        在本实施案例中,相关参数的选择如下:alpha=8,wsize=9(该值与两帧图像的最大运动距离有关,运动越大,则该值应该越大),MAX_CLR_DIF=10000(该值与估计精度有关,取值过小将导致在双边滤波时存在很多点估计不到深度的情况,而取值太大将失去过滤效果),运动补偿时块大小为8,运动搜索范围为20。wsize是算法输入参数,取值一般在3~19之间。alpha值用于衡量双边滤波的滤波程度,其值越小,颜色差越小的点的深度所占比重越大。

        如图2所示,本发明具体实施步骤如下:

        1、读入两帧彩色图像p和q(RGB三通道图像),并读入图像p的深度图像(单通道图像),深度图像为图像p中每一点的深度,离观察者最近的深度值为255,最远的深度值为0,如图1所示;

        2、对于q中的每一点(i,j),其颜色值为Color_q(i,j),找到图像p中以(i,j)为中心,wsize为边长的正方形区域内的每一点(m,n),记其颜色值为Color_p(m,n),计算点(m,n)与点(i,j)之间的颜色距离:clr_dist2=[R(i,j)-R(m,n)]2+[G(i,j)-G(m,n)]2+[B(i,j)-B(m,n)]2。

        3、如果颜色距离clr_dist2小于给定的阈值MAX_CLR_DIF,则计算权值:weight(m,n,i,j)=exp[-clr_dist2/(alpha*alpha)]*[1/(clr_dist2/(256*256)+1)],否则权值weight(m,n,i,j)=0,表示过滤掉该点。

        所述阈值MAX_CLR_DIF是算法输入参数,它的取值范围是0~3*255*255,该参数的作用是限制滤波过程中与图像q中(i,j)点颜色差值太大的点的深度对点(i,j)深度的影响。取值为0时则不管颜色差是多少都将其深度考虑进来,而随着取值的增大,与(i,j)点颜色值差别很大的点的深度将不予考虑,而只考虑与点(i,j)颜色很相似的点的深度。如果该值取得太大,有可能造成上述正方形区域内没有点被考虑,这时候点(i,j)点的深度将不能被估计到,此时默认其深度为0,从而在最后的结果中呈现“黑色的空洞”。

        4、对图像p的深度图像中以(i,j)为中心,wsize为边长的正方形区域内的每一点加权平均,权重即为步骤2中计算所得,从而得到q中点(i,j)的估计深度。

        5、将q的估计深度图像分为8*8的小块,对每一个小块,在给定的搜索范围内使用块匹配的运动估计法(如全搜索算法、菱形搜索算法等方法)计算得到图像p的深度图像中与其最相似的小块,相似度度量函数定义为:cost=sum_b(clr_dist*dep_dist),其中clr_dist=sqrt([R(x,y)-R(s,t)]2+[G(x,y)-G(s,t)]2+[B(x,y)-B(s,t)]2),dep_dist=abs(D(x,y)-D(s,t)),sum_b()表示对小块内的所有点求和,sqrt()表示对括号内的变量进行开方运算,abs()表示对括号内的变量进行求绝对值运算,R(x,y)、G(x,y)、B(x,y)、D(x,y)表示图像p中点(x,y)的红色、绿色、蓝色分量值以及图像p的深度图像中点(x,y)的值,R(s,t)、G(s,t)、B(s,t)、D(s,t)表示q图像中点(s,t)的红色、绿色、蓝色分量值以及q的估计深度图像中点(s,t)值。在搜索范围内取cost最小的块即为最相似的块。

        6、用图像p的深度图像中最相似的小块的每一点的深度代替q的估计深度图像中当前块的相应点的深度,从而得到精确的q的深度图像。

    关于本文
    本文标题:一种深度图像跟踪方法.pdf
    链接地址://www.4mum.com.cn/p-5782004.html
    关于我们 - 网站声明 - 网站地图 - 资源地图 - 友情链接 - 网站客服 - 联系我们

    [email protected] 2017-2018 www.4mum.com.cn网站版权所有
    经营许可证编号:粤ICP备17046363号-1 
     


    收起
    展开
  • 四川郎酒股份有限公司获第十二届人民企业社会责任奖年度环保奖 2019-05-13
  • 银保监会新规剑指大企业多头融资和过度融资 2019-05-12
  • 韩国再提4国联合申办世界杯 中国网友无视:我们自己来 2019-05-11
  • 中国人为什么一定要买房? 2019-05-11
  • 十九大精神进校园:风正扬帆当有为 勇做时代弄潮儿 2019-05-10
  • 粽叶飘香幸福邻里——廊坊市举办“我们的节日·端午”主题活动 2019-05-09
  • 太原设禁鸣路段 设备在测试中 2019-05-09
  • 拜耳医药保健有限公司获第十二届人民企业社会责任奖年度企业奖 2019-05-08
  • “港独”没出路!“梁天琦们”该醒醒了 2019-05-07
  • 陈卫平:中国文化内涵包含三方面 文化复兴表现在其中 2019-05-06
  • 人民日报客户端辟谣:“合成军装照”产品请放心使用 2019-05-05
  • 【十九大·理论新视野】为什么要“建设现代化经济体系”?   2019-05-04
  • 聚焦2017年乌鲁木齐市老城区改造提升工程 2019-05-04
  • 【专家谈】上合组织——构建区域命运共同体的有力实践者 2019-05-03
  • 【华商侃车NO.192】 亲!楼市火爆,别忘了买车位啊! 2019-05-03
  • 刮刮乐福彩中奖高还是体彩高 六肖中特期期准王中王128 全民镇江麻将下载 玩高奖金彩票能赚钱吗 百家乐牌 琼涯海南麻将 体彩最赚钱 欢乐生肖游戏怎么玩 幸运彩票安卓 35选7走势图大星 如意彩票群 黑龙江p62开奖结果查询 北京pk10官网与黑彩 街机捕鱼鱼潮 福建36选7开奖走势结果 秒速飞艇开奖网盛兴