• 四川郎酒股份有限公司获第十二届人民企业社会责任奖年度环保奖 2019-05-13
  • 银保监会新规剑指大企业多头融资和过度融资 2019-05-12
  • 韩国再提4国联合申办世界杯 中国网友无视:我们自己来 2019-05-11
  • 中国人为什么一定要买房? 2019-05-11
  • 十九大精神进校园:风正扬帆当有为 勇做时代弄潮儿 2019-05-10
  • 粽叶飘香幸福邻里——廊坊市举办“我们的节日·端午”主题活动 2019-05-09
  • 太原设禁鸣路段 设备在测试中 2019-05-09
  • 拜耳医药保健有限公司获第十二届人民企业社会责任奖年度企业奖 2019-05-08
  • “港独”没出路!“梁天琦们”该醒醒了 2019-05-07
  • 陈卫平:中国文化内涵包含三方面 文化复兴表现在其中 2019-05-06
  • 人民日报客户端辟谣:“合成军装照”产品请放心使用 2019-05-05
  • 【十九大·理论新视野】为什么要“建设现代化经济体系”?   2019-05-04
  • 聚焦2017年乌鲁木齐市老城区改造提升工程 2019-05-04
  • 【专家谈】上合组织——构建区域命运共同体的有力实践者 2019-05-03
  • 【华商侃车NO.192】 亲!楼市火爆,别忘了买车位啊! 2019-05-03
    • / 14
    • 下载费用:20 金币  

    重庆时时彩什么最稳定: 一种分布式系统的系统测试方法及装置.pdf

    摘要
    申请专利号:

    重庆时时彩单双窍门 www.4mum.com.cn CN201210581715.1

    申请日:

    2012.12.27

    公开号:

    CN103902447A

    公开日:

    2014.07.02

    当前法律状态:

    授权

    有效性:

    有权

    法律详情: 授权|||实质审查的生效IPC(主分类):G06F 11/36申请日:20121227|||公开
    IPC分类号: G06F11/36; G06F11/30 主分类号: G06F11/36
    申请人: 百度在线网络技术(北京)有限公司
    发明人: 杨斐
    地址: 100085 北京市海淀区上地十街10号百度大厦
    优先权:
    专利代理机构: 北京鸿德海业知识产权代理事务所(普通合伙) 11412 代理人: 袁媛
    PDF完整版下载: PDF下载
    法律状态
    申请(专利)号:

    CN201210581715.1

    授权公告号:

    ||||||

    法律状态公告日:

    2018.03.06|||2015.09.02|||2014.07.02

    法律状态类型:

    授权|||实质审查的生效|||公开

    摘要

    本发明提供了一种分布式系统的系统测试方法及装置,其中所述方法包括:A.对线上的分布式系统进行监控,以获取在所述线上的分布式系统上执行目标作业所依赖的第一标识文件;B.根据线下的分布式系统的集群规模对所述第一标识文件进行修改,以获取在所述线下的分布式系统上执行所述目标作业所依赖的第二标识文件,以及,根据所述第二标识文件获取在所述线下的分布式系统上执行所述目标作业所依赖的输入数据;C.在所述线下的分布式系统上根据所述第二标识文件及获取的输入数据执行所述目标作业,以对所述线下的分布式系统进行测试。通过上述方式,本发明能够增加系统测试的有效性。

    权利要求书

    权利要求书
    1.  一种分布式系统的系统测试方法,包括:
    A.对线上的分布式系统进行监控,以获取在所述线上的分布式系统上执行目标作业所依赖的第一标识文件;
    B.根据线下的分布式系统的集群规模对所述第一标识文件进行修改,以获取在所述线下的分布式系统上执行所述目标作业所依赖的第二标识文件,以及,根据所述第二标识文件获取在所述线下的分布式系统上执行所述目标作业所依赖的输入数据;
    C.在所述线下的分布式系统上根据所述第二标识文件及获取的输入数据执行所述目标作业,以对所述线下的分布式系统进行测试。

    2.  根据权利要求1所述的方法,其特征在于,所述步骤A包括:
    A1.从所述线上的分布式系统中提取当前作业所依赖的当前标识文件;
    A2.对所述线上的分布式系统进行轮询,以获取当前作业的状态;
    A3.当所述状态为执行失败时将所述步骤A1中提取的当前标识文件丢弃,否则将所述步骤A1中提取的当前标识文件作为所述第一标识文件。

    3.  根据权利要求1或2所述的方法,其特征在于,所述分布式系统为Hadoop系统。

    4.  根据权利要求3所述的方法,其特征在于,所述第一标识文件及所述第二标识文件均包含作业程序文件、作业分块文件及作业配置文件。

    5.  根据权利要求4所述的方法,其特征在于,所述步骤B包括:
    根据预设的配置修改条件对所述第一标识文件包含的作业配置文件中的配置项进行修改,以得到所述第二标识文件包含的作业配置文件,其中所述配置修改条件由所述线下系统的集群规模决定;
    从在所述线上的分布式系统上执行所述目标作业所依赖的输入数据中复制指定规模的输入数据到所述线下的分布式系统中,以得到在所述线下的分布式系统上执行所述目标作业所依赖的输入数据,其中所述指定规模是由所述第二 标识文件包含的作业配置文件中的配置项确定的规模;
    利用所述第一标识文件包含的作业分块文件确定输入分块的大小,按照所述大小对复制到所述线下的分布式系统中的输入数据进行切分,并将切分结果覆盖至所述第一标识文件包含的作业分块文件中,以得到所述第二标识文件包含的作业分块文件,以及,将所述第一标识文件包含的作业程序文件作为所述第二标识文件包含的作业程序文件。

    6.  一种分布式系统的系统测试装置,包括:
    监控单元,用于对线上的分布式系统进行监控,以获取在所述线上的分布式系统上执行目标作业所依赖的第一标识文件;
    转换单元,用于根据所述第一标识文件获取在线下的分布式系统上执行目标作业所依赖的第二标识文件,以及,根据所述第二标识文件获取在所述线下的分布式系统上执行所述目标作业所依赖的输入数据;
    提交单元,用于在所述线下的分布式系统上根据所述第二标识文件及获取的输入数据执行所述目标作业,以对所述线下系统进行测试。

    7.  根据权利要求6所述的装置,其特征在于,所述监控单元包括:
    提取单元,用于从所述线上的分布式系统中提取当前作业所依赖的当前标识文件;
    轮询单元,用于对所述线上的分布式系统进行轮询,以获取当前作业的状态;
    确定单元,用于当所述状态为执行失败时,将所述提取单元提取的当前标识文件丢弃,否则将所述提取单元提取的当前标识文件作为所述第一标识文件。

    8.  根据权利要求6或7所述的装置,其特征在于,所述分布式系统为Hadoop系统。

    9.  根据权利要求8所述的装置,其特征在于,所述第一标识文件及所述第二标识文件均包含作业程序文件、作业分块文件及作业配置文件。

    10.  根据权利要求9所述的装置,其特征在于,所述转换单元包括:
    修改单元,用于根据预设的配置修改条件对所述第一标识文件包含的作业 配置文件中的配置项进行修改,以得到所述第二标识文件包含的作业配置文件,其中所述配置修改条件由所述线下系统的集群规模决定;
    复制单元,用于从在所述线上的分布式系统上执行所述目标作业所依赖的输入数据中复制指定规模的输入数据到所述线下的分布式系统中,以得到在所述线下的分布式系统上执行所述目标作业所依赖的输入数据,其中所述指定规模是由所述第二标识文件包含的作业配置文件中的配置项确定的规模;
    文件生成单元,用于利用所述第一标识文件包含的作业分块文件确定输入分块的大小,按照所述大小对复制到所述线下的分布式系统中的输入数据进行切分,并将切分结果覆盖至所述第一标识文件包含的作业分块文件中,以得到所述第二标识文件包含的作业分块文件,以及,将所述第一标识文件包含的作业程序文件作为所述第二标识文件包含的作业程序文件。

    关 键 词:
    一种 分布式 系统 测试 方法 装置
      专利查询网所有资源均是用户自行上传分享,仅供网友学习交流,未经上传用户书面授权,请勿作他用。
    0条评论

    还可以输入200字符

    暂无评论,赶快抢占沙发吧。

    关于本文
    本文标题:一种分布式系统的系统测试方法及装置.pdf
    链接地址://www.4mum.com.cn/p-6120610.html
    关于我们 - 网站声明 - 网站地图 - 资源地图 - 友情链接 - 网站客服客服 - 联系我们

    [email protected] 2017-2018 www.4mum.com.cn网站版权所有
    经营许可证编号:粤ICP备17046363号-1 
     


    收起
    展开
  • 四川郎酒股份有限公司获第十二届人民企业社会责任奖年度环保奖 2019-05-13
  • 银保监会新规剑指大企业多头融资和过度融资 2019-05-12
  • 韩国再提4国联合申办世界杯 中国网友无视:我们自己来 2019-05-11
  • 中国人为什么一定要买房? 2019-05-11
  • 十九大精神进校园:风正扬帆当有为 勇做时代弄潮儿 2019-05-10
  • 粽叶飘香幸福邻里——廊坊市举办“我们的节日·端午”主题活动 2019-05-09
  • 太原设禁鸣路段 设备在测试中 2019-05-09
  • 拜耳医药保健有限公司获第十二届人民企业社会责任奖年度企业奖 2019-05-08
  • “港独”没出路!“梁天琦们”该醒醒了 2019-05-07
  • 陈卫平:中国文化内涵包含三方面 文化复兴表现在其中 2019-05-06
  • 人民日报客户端辟谣:“合成军装照”产品请放心使用 2019-05-05
  • 【十九大·理论新视野】为什么要“建设现代化经济体系”?   2019-05-04
  • 聚焦2017年乌鲁木齐市老城区改造提升工程 2019-05-04
  • 【专家谈】上合组织——构建区域命运共同体的有力实践者 2019-05-03
  • 【华商侃车NO.192】 亲!楼市火爆,别忘了买车位啊! 2019-05-03