如何进行异构数据库同步

数据库同步有很多方法,这里不讨论了,我这里只针对异构数据库.那什么是异构数据库呢,我们先看下定义(引用)

异构数据库系统是相关的多个数据库系统的集合，可以实现数据的共享和透明访问，每个数据库系统在加入异构数据库系统之前本身就已经存在，拥有自己的DMBS。异构数据库的各个组成部分具有自身的自治性，实现数据共享的同时，每个数据库系统仍保有自己的应用特性、完整性控制和安全性控制。异构数据库系统的异构性主要体现在以下几个方面：

计算机体系结构的异构

各个参与的数据库可以分别运行在大型机、小型机、工作站、PC或嵌入式系统中。

基础 *** 作系统的异构

各个数据库系统的基础 *** 作系统可以是Unix、Windows NT、 Linux等。

DMBS本身的异构

可以是同为关系型数据库系统的Oracle、 SQL Server等，也可以是不同数据模型的数据库，如关系、模式、层次、网络、面向对象，函数型数据库共同组成一个异构数据库系统。

在转换的过程中，有时要想实现严格的等价转换是比较困难的。首先要确定两种模型中所存在的各种语法和语义上的冲突，这些冲突可能包括：

命名冲突：即源模型中的标识符可能是目的模型中的保留字，这时就需要重新命名。

格式冲突：同一种数据类型可能有不同的表示方法和语义差异，这时需要定义两种模型之间的变换函数。

结构冲突：如果两种数据库系统之间的数据定义模型不同，如分别为关系模型和层次模型，那么需要重新定义实体属性和联系，以防止属性或联系信息的丢失。

异构数据库同步的解决方法主要有以下几种:

1.建立触发器记录表的变化情况,在源数据库建立增、删、改触发器,然后根据变化登记表进行处理.优点是充分结合业务进行处理,保持数据的一致性、完整性，实时性较强，对多个数据源合并有非常大的优势，我们现在也是采用这种方式来同步的。

2.日志：通过分析源数据库日志，来获得源数据库中的变化的数据。ORCLE 的 异步 CDC (Asynchronized CDC) 就是使用这种方式，但缺点是有一定延时.

数据迁移我只用过datamanager，不知道还有没有其他更简单方便的数据迁移的工具。

1、一般先要在准备后从源数据库中抽取数据的SQL：如果两个库表结构完全一致就没什么说的，只要注意两个不同库表间字段的兼容性（比如同长度的varchar字段，SQLserver与DB2可存储的实际汉字字符数是不一样的）；如果表结构不一样，抽取SQL就麻烦一点。——我的话是按目标表结构来准备SQL的。就是比如目标库中有表A，那么表A有哪些字段分别存放什么数据，这些数据怎么从源库表获取，这就是所要准备的抽取SQL。

2、在datamanager上配置好源库跟目标库的连接。

3、将准备好的抽取SQL拷到datamanager编辑器中，并将select到的字段设置对应到目标库表的各个列字段中，然后点开始执行就好了。

4、要注意的是，执行方式那里有insert、update、update/insert，一般选update/insert，根据实际情况决定。

5、具体 *** 作可查看datamanager使用说明及帮助文档。

说白了就是从源库表中抽取数据出来放到一个中间表中，然后再导入到目标库表中，只不过datamanager帮你做了导出导入的事，用户只需关心抽取SQL跟目标表字段的对应关系。

写了这么多，如果有更好的方法也请告诉我，谢谢！

如果两种数据库系统之间的数据定义模型不同，如分别为关系模型和层次模型，那么需要重新定义实体属性和联系，以防止属性或联系信息的丢失。

----总之，在进行数据转换后，一方面源数据库模式中所有需要共享的信息都转换到目的数据库中，另一方面这种转换又不能包含冗余的关联信息。

----数据库转换工具可以实现不同数据库系统之间的数据模型转换，需要进一步研究的问题是：如果数据库转换同时进行数据定义模式转换和数据转换，就可能引起同一数据集合在异构数据库系统中存在多个副本，因此需要引入新的访问控制机制。在保证各个参与数据库自治，维护其完整性、安全性的基础上，对于异构数据库系统提供全局的访问控制、并发机制和安全控制。

----如果数据库转换只进行数据定义转换，不产生数据的副本，那么在新的目的数据库定义模型的框架下访问数据，实现上仍是对源数据库系统中数据的访问。这时利用新的数据库系统中的数据处理语言实现的事务，不能直接访问源数据库，必须进行事务级的翻译才可以执行。

---