删除或更新信息,请邮件至freekaoyan#163.com(#换成@)

混合MapReduce环境下大数据划分的查询优化

中国人民大学 辅仁网/2017-07-04

文献详情
混合MapReduce环境下大数据划分的查询优化
外文标题:Query Optimization of Big Data Partition in Hybrid MapReduce System
文献类型:期刊
作者:李伏[1]朱青[2]
机构:[1]中国人民大学信息学院计算机系
[2]中国人民大学信息学院计算机系

年:2012
期刊名称:计算机科学与探索
卷:06
期:10
页码范围:877-887
增刊:增刊
收录情况:中国科技核心期刊CSCD(CSCD:4654050)
所属部门:信息学院
语言:中文
ISSN:1673-9418
链接地址:http://d.g.wanfangdata.com.cn/Periodical_jsjkxyts201210002.aspx
DOI:10.3778/j.issn.1673-9418.2012.10.002
人气指数:1
浏览次数:1
基金:国家自然科学基金; 上海市高可信计算重点实验室开放课题
关键词:混合架构;查询优化;划分建议器
摘要:在MapReduce与数据库的混合架构中,数据划分是影响查询性能的重要因素.对于开销最大的连接和聚集操作,采用混合MapReduce的方式实现,需要大规模数据的跨结点传输,网络传输和I/O开销巨大.为了减少传输的数据量,并提高连接操作的查询效率,提出了划分建议器模型.实现了MapReduce和数据库混合架构上的划分建议器,并计算划分代价,生成最优的数据划分方案,提高了系统效率.为了减少查询时间,依据划分建议器模型,提出了基于代价优先的生成策略和空间搜索算法,减少了划分建议器生成最优方案的时间.通过实验验证了划分建议器的有效性,使系统的整体查询代价最小,显著提高了系统性能.
作者其他论文



基于压缩全文索引的演变图查询.肖洋;朱青;吴粤皖.计算机工程与应用.2015,117-124.
时序图上动态子图查询优化算法.朱青;李红.计算机科学与探索.2014.
完善我国地方税体系的构想.朱青.财贸经济.2014,5-13.
HyDB:集成MapReduce和数据库的高效SaaS架构.覃左言;朱青;李伏.小型微型计算机系统.2012,33(3),512-518.
基于语义相似度的Web信息可信分析.王腾;朱青;王珊.计算机学报.2013,36(8),1668-1681.

相关话题/数据 信息学院 优化 系统 数据库

  • 领限时大额优惠券,享本站正版考研考试资料!
    大额优惠券
    优惠券领取后72小时内有效,10万种最新考研考试考证类电子打印资料任你选。涵盖全国500余所院校考研专业课、200多种职业资格考试、1100多种经典教材,产品类型包含电子书、题库、全套资料以及视频,无论您是考研复习、考证刷题,还是考前冲刺等,不同类型的产品可满足您学习上的不同需求。 ...
    本站小编 Free壹佰分学习网 2022-09-19
  • 中国人民大学法学文献与法律信息系统推进法学数据库共享
    文献详情中国人民大学法学文献与法律信息系统推进法学数据库共享文献类型:期刊作者:姚欢庆[1]机构:[1]中国人民大学年:2012期刊名称:中国教育网络期:11页码范围:63-64增刊:增刊语言:中文ISSN:1672-9781链接地址:http://d.g.wanfangdata.com.cn/Pe ...
    中国人民大学 辅仁网 2017-07-04
  • 高职院校网络系统管理专业建设探索--以三亚航空旅游职业学院为例
    文献详情高职院校网络系统管理专业建设探索--以三亚航空旅游职业学院为例文献类型:期刊作者:刘夏[1]陈明锐[2]机构:中国人民大学教育学院,北京10087三亚航空旅游职业学院,海南三亚572000;海南大学信息科学与技术学院,海南海口,570228年:2012期刊名称:计算机教育期:22页码范围:1 ...
    中国人民大学 辅仁网 2017-07-04
  • 大数据模式分解的隐私保护研究
    文献详情大数据模式分解的隐私保护研究外文标题:PrivacyPreservingBasedonModelDivisionforLargeData文献类型:期刊作者:李宁[1]朱青[2]机构:[1]中国人民大学信息学院计算机系[2]中国人民大学信息学院计算机系年:2012期刊名称:计算机科学与探索卷: ...
    中国人民大学 辅仁网 2017-07-04
  • 菌群优化算法研究综述
    文献详情菌群优化算法研究综述外文标题:Overviewofresearchonbacterialforagingoptimization文献类型:期刊作者:武林娟[1]胡桂武[2]陈建超[3]机构:[1]广东商学院经济贸易与统计学院[2]广东商学院数学与计算科学学院[3]中国人民大学教育部数据工程与 ...
    中国人民大学 辅仁网 2017-07-04
  • 金融机构一体化集成风险管理技术与系统
    文献详情金融机构一体化集成风险管理技术与系统文献类型:期刊作者:徐晟[1]李源[2]机构:[1]中国人民大学[2]中南财经政法大学金融学院年:2012期刊名称:统计与决策期:3页码范围:155-158增刊:增刊收录情况:中文核心期刊要目总览CSSCI(42C1092012030045)语言:中文IS ...
    中国人民大学 辅仁网 2017-07-04
  • 中国特色社会主义理论体系发展的动力系统
    文献详情中国特色社会主义理论体系发展的动力系统文献类型:期刊作者:赵秀华[1]机构:[1]中国人民大学年:2012期刊名称:中共四川省委省级机关党校学报期:6页码范围:14-18增刊:增刊语言:中文ISSN:1008-9187链接地址:http://d.g.wanfangdata.com.cn/Pe ...
    中国人民大学 辅仁网 2017-07-04
  • 台湾地区建筑物测绘与登记信息系统
    文献详情台湾地区建筑物测绘与登记信息系统外文标题:TheBuildingSurveyingandPropertyRegistrationSystemofTaiwanArea文献类型:期刊作者:谭峻[1]机构:[1]中国人民大学公共管理学院土地管理系年:2012期刊名称:测绘与空间地理信息卷:35期: ...
    中国人民大学 辅仁网 2017-07-04
  • 基于粗糙性惩罚的变系数纵向数据模型的参数估计
    文献详情基于粗糙性惩罚的变系数纵向数据模型的参数估计文献类型:期刊作者:郭海兵[1]李连庆[2]机构:[1]淮海工学院理学院[2]中国人民大学统计学院年:2012期刊名称:统计与决策期:16页码范围:11-13增刊:增刊收录情况:中文核心期刊要目总览所属部门:统计学院语言:中文ISSN:1002-6 ...
    中国人民大学 辅仁网 2017-07-04
  • 开放经济视角下国际金融危机对中国经济的影响--来自1994-2010年省级面板数据的实证证据
    文献详情开放经济视角下国际金融危机对中国经济的影响--来自1994-2010年省级面板数据的实证证据文献类型:期刊作者:陈福中[1]陈诚[2]机构:[1]中国人民大学商学院[2]中国人民大学商学院年:2012期刊名称:当代经济科学卷:34期:4页码范围:56-63增刊:增刊收录情况:中文核心期刊要目 ...
    中国人民大学 辅仁网 2017-07-04
  • 基于HIS系统的真实世界的59287例疏血通注射液临床实效研究
    文献详情基于HIS系统的真实世界的59287例疏血通注射液临床实效研究外文标题:ClinicaloutcomesresearchofShuxuetonginjectionbasedon59287casesinhospitalinformationsystem文献类型:期刊作者:支英杰[1]张辉[2] ...
    中国人民大学 辅仁网 2017-07-04