面向数据库与Hadoop混合平台的OLAP查询处理方法
文献类型:专利
发明人:张延松[1]
机构:中国人民大学
申请人:中国人民大学
专利类型:发明专利
年度:2012
专利申请日期:2012-04-18
专利公开日期:2012-09-12
专利公开号:CN102663117A
专利申请号:CN201210114112.0
国家或地区:北京
摘要:本发明公开了一种面向数据库与Hadoop混合平台的OLAP查询处理方法。该方法以Hadoop的多复本容错机制为基础,在进行OLAP查询处理时,首先在主工作复本上执行,并将查询处理结果记录于本地数据库的聚集结果表中;当工作节点出现故障时,通过namenode查找主工作复本对应的容错复本的节点信息,并调用MapReduce任务在容错复本上完成OLAP查询处理任务。本发明将数据库技术与Hadoop技术相结合,以双存储引擎、双查询处理引擎的方式将数据库的存储性能和Hadoop的高可扩展性、高可用性进行结合;利用主-从式复本管理机制将数据库查询处理与MapReduce查询处理以松散耦合的方式进行集成,既保证了高查询处理性能,又保证了高容错性能。
作者其他论文
内存OLAP多核并行查询优化技术研究.焦敏;张延松;王珊,等.计算机学报.2014,1895-1910.
一个基于三元组存储的列式OLAP查询执行引擎.朱阅岸;张延松;周烜,等.软件学报.2014,25(4),753-767.
面向大规模机群的可扩展OLAP查询技术.王会举;覃雄派;王珊,等.计算机学报.2015,38(1),45-58.
内存数据仓库集群技术研究.张延松;王珊;周烜.华东师范大学学报(自然科学版).2014,117-132.
Co-OLAP:CPU&GPU混合平台上面向星形模型基准的协同OLAP.张宇;张延松;张兵,等.华东师范大学学报(自然科学版).2014,240-251.