基于快照日志分析的数据同步方法

基于快照日志分析的数据同步方法

ID:38193536

大小:362.44 KB

页数:5页

时间:2019-05-26

基于快照日志分析的数据同步方法_第1页
基于快照日志分析的数据同步方法_第2页
基于快照日志分析的数据同步方法_第3页
基于快照日志分析的数据同步方法_第4页
基于快照日志分析的数据同步方法_第5页
资源描述:

《基于快照日志分析的数据同步方法》由会员上传分享,免费在线阅读,更多相关内容在行业资料-天天文库

1、〕后勤工程学院学期:一一一8文章编号田基于快照日志分析的数据同步方法,,陈玲,,魏玮,,徐,黄晓微世莲1.后勤工程学院后勤信息工程系,重庆;2.,(40(刃16重庆市铁马建设监理公司重庆4X(刃50),摘要在大型信息系统的开发中分布式数据库和分布式应用系统间的数据同步问,、题是一个较难解决的问题现有的各种解决方案存在着难以反映源数据频繁变化工作效率。e低以及应用程序间协调困难和部署管理复杂等问题通过对oard数据库的数据复制机,,、制的研究提出了基于快照日志分析的数据同步方法介绍了快照日志的数据结构对数据,,库操作的记录方式并阐述了提取快照日志记录的增量变化

2、的日志分析算法对于实现事务。操作频繁的数据表间的数据同步提供了一种新思路;快照日志关键词Oard;e数据同步二T:B中图分类号3P92文献标识码,,随着信息技术和网络技术的发展分布式数据库和分布式信息系统得到越来越广泛的应用各个分。le布数据库和应用系统间的数据同步问题也随之凸现通过对Oacr数据库的数据复制机制的深人研,e,究本文剖析了oard数据库快照日志对数据库更新的日志记录方式在此基础上提出了一种基于对,eoard数据库快照日志分析的数据同步方法为解决分布式数据库间的数据同步间题提供了一种方式·’。灵活部署代价低的新途径〔.z11数据同步机制分析:信

3、息系统的开发人员经常会遇到这样的问题客户要求将地理上分布在各处的各下级单位的相关、。:数据及时准确地抽取到总部的中心数据库中采用得较多的解决方法有1.1“报盘”方式“”报盘方式即下级单位将上级需要的相关数据写人一定格式的磁盘文件中并通过一定的方式将,,文件上报给上级单位上级单位接收到该文件后通过接收程序将文件中的数据读出并写人数据库中对。应的表中“”,,报盘方式运用非常广泛在没有网络的条件下也可以实现数据库中数据的同步对硬件环境要,。“”:求极低因此这种方式到现在仍然是某些场合的主角但报盘方式也存在明显的缺点它只适合向,,;上级数据库中添加新的数据难以反映事

4、务操作频繁的数据表中数据的变化工作效率较低对盘的传,。输需要通过邮寄或人工传输的方式具有不确定性因素和信息滞后性1.2存取文件方式。存取文件的方式能够帮助两个应用程序进行通信源数据库将需要上报的数据记录放到一个文件,。:,中接收端再通过读取这一文件来得到新数据缺点两级应用程序之间的工作难以协调在松散祸合。的网络环境下还需要去解决如何发现文件的问题.e13利用Oarle数据库的复制(Replieaiton)机制oleRhcaiton。acr数据库的复制(eP)机制允许用户拷贝数据库数据到多个本地和远程系统可以采收稿日期:205一1一。:,,,,,、、。作者简介

5、黄晓徽(1975一)男重庆市合川市人讲师硕士主要从事数据库数据仓库决策支持系统的研究~_~女P一一赴鱼`及匕芜』鼓兰月一。〔’〕取建立只读快照或可更新快照的方式实现对源数据表的基本复制或对称复制…,,复制机制可以实现快照表与源表间的数据的一致性能准确反映源表中频繁的事务操作但要求在。,,进行数据复制的数据库之间存在稳定的网络连接同时快照表是对源表的一个复制在数据结构和数据内容上与源表均保持一致,这也限制了处理的灵活性。例如,对于每个下级单位数据库中的数据表,。,在总部数据库中均要建立对应的快照表另外这种方法需要用户较熟练掌握Oracle数据库管理知,。识在实

6、际应用中也受到很大的限制,如果要进行数据同步的数据库间不具备直接的或稳定的网络连接并且对源表有频繁的数据操作,“”、。(不仅是添加操作)则报盘方式存取文件方式和复制机制均难以满足此类同步要求在这种应用,。环境中需要另外寻求使数据同步的方式re2oacl数据复制机制及快照日志数据结构分析通过对Oacrle数据复制机制的研源数据库1,究可以发现DBMS将对源表的所有数.源快照日志,据操作都记载在内部日志中在复制点源数据库表,时根据内部日志对目的表进行修改使接化}产蠢币收并,之与源表达到在复制点的数据一致这卜奋`副源修表改。一切均由DBMS内部程序完成如果能数目据

7、的,源数据库n提取出日志中记载的数据操作记录就蓬}I变表接}..能很方便地实现灵活且功能强大的数据目的教据岸快照日志户`J万jI.宁.J户,歹.口.J.。至同步程序由于内部日志以特定的格式存,,储直接获取和分析较困难但快照日目的表n志为我们提供了一个相对易于分析的途匹巫」提取源表的数据变化。,径基于对快照日志的分析笔者提出(b)基于快肤日志分析的数据同步方法。了一种新的数据同步实现方式图1是图1数据复制机制与基于快照日志分析的数据同步机制比较数据复制机制和基于快照日志分析的同步。机制的比较e。、在Oard数据库中可以为数据表建立快照日志(nSaPShat10

8、9)快照日志记录对应的数据表的增、,,’。,更新等一

当前文档最多预览五页,下载文档查看全文

此文档下载收益归作者所有

当前文档最多预览五页,下载文档查看全文
温馨提示:
1. 部分包含数学公式或PPT动画的文件,查看预览时可能会显示错乱或异常,文件下载后无此问题,请放心下载。
2. 本文档由用户上传,版权归属用户,天天文库负责整理代发布。如果您对本文档版权有争议请及时联系客服。
3. 下载前请仔细阅读文档内容,确认文档内容符合您的需求后进行下载,若出现内容与标题不符可向本站投诉处理。
4. 下载文档时可能由于网络波动等原因无法下载或下载错误,付费完成后未能成功下载的用户请联系客服处理。