文献详情
分布式异构数据库数据同步工具
外文标题：Data Synchronization Tool for Distributed Heterogeneous Database
文献类型：期刊
期刊名称：软件学报
年：2019
卷：30
期：3
页码：684-699
ISSN：1000-9825
关键词：数据同步;读写分离;SQL还原
所属部门：信息学院
链接地址：http://d.oldg.wanfangdata.com.cn/Periodical_rjxb201903012.aspx
摘要：一般而言,读写分离技术可以解决当前大数据环境下的读写速度失配的部分问题,但是现有的读写分离技术主要是针对同构数据库的解决方案.由于存储结构的不一致,由行式存储数据库和列式存储数据库构成的异构分布式数据库系统相较于同构分布式数据库系统在数据同步的过程中就会面临格式转换、同步速度不匹配等诸多难题.提出了基于MySQL二进制日志(Binlog)进行SQL还原的方法TD-Reduction,设计并实现了Binlog解析器BinParser和Binlog还原器BinReducer,它们可以基于Mixed格式的Binlog,针对不同的事件(event)进行日志的解析,并依据相应的规则进行还原,生成可执行的SQL语句.综合以上技术,实现了一款分布式数据库数据同步工具Cynomys.在实验环境中,Cynomys表现出较好的性能.该方法适用于所有具有类似Binlog机制的其他异构数据库之间进行数据同步.
DOI：10.13328/j.cnki.jos.005694
百度学术：分布式异构数据库数据同步工具
语言：中文
人气指数：2
浏览次数：2
基金：国家重点研发计划; 国家自然科学基金; 北京市科技计划
作者其他论文



大数据集成中确定数据准确属性值的WR方法.周宁南, 张孝, 王珊,.第二届CCF大数据学术会议论文集中国计算机学会. 2014, 1-8.
UHS:基于视频监控数据的不间断客服助手系统.李晖;张孝;王珊,等.计算机研究与发展.2010,47(z1),465-469.
myBUD中多媒体数据索引CFTree*的研究和实现.张孝;孙新云;刘科研,等.计算机研究与发展.2011,48(10),1935-1941.
CloudIndexEval:面向云平台上多维索引的评测系统.周新;王延昊;刘辰,等.计算机研究与发展.2013,50(z1),431-434.
包含高代价谓词查询的基于属性势值估算的优化技术研究.于利胜;张建梅;王珊,等.计算机研究与发展.2010,47(z1),127-132.