基于Web Service的数据库同步系统
关键词:Web Service;异构数据库;同步;ADO.NET;
摘 要
结合当前流行的Web Service和ADO.NET技术构造了一个不受平台限制的异构数据库同步系统。实现了处于Internet上的Sql Server2000向Oracle 的单向同步功能,能够基于IP的安全身份验证功能,多个IP实现了净量数据的传输。对同步的配置信息采用XML存储,采用Windows应用程序界面化配置,操作方便、易懂。
因为同步环境是对处于Internet上的异构数据库的实时同步;在设计与开发中,重点关注异构数据库的同步以及数据传输的可靠性;探讨能实现可靠数据的同步,以及传输的高效性。介绍了实现系统的思路以及所需的关键技术。系统用到的相关技术有捕获技术Windows 托盘服务、多线程处理、以及网络消息机制、多IP同步、同步IP权限验证、同步表名及字段以及字段类型的可配置、异构数据类型的转换、Web Service等。
3.2 功能需求
本设计要实现的功能:
1. 能够使处于Internet 上的异构数据库的单向同步功能,初步先实现Sql Server2000向Oracle 与的同步,需要考虑其它数据库的情况比如my Sql等。
2. 同步数据需要可靠的传输,保证数据能够准确、完全的传输到被同步的一方。
3. 同步需要一定安全性,能够按照进行同步IP或则物理地址来验证同步身份。
4. 由于数据在Internet上传输,必须保证同步数据的传输开销小,安全等。
5. 能够实现不同主机的多个数据库同时同步功能。
6. 对实时性同步、定期同步可配置,既可以选择实时同步、手动同步或则按需要同步的数据量来同步。
7. 同步信息可以配置性。同步信息包括:同步的字段、字段类型、同步的表、分配了权限的同步主机等。
8. 同步的数据类型能够是不同的类型,比如数值型向字符型的同步等。能够对同步的某个字段做特殊的处理后再同步。既是能够实现多个字段合并为一个字段,或则一个、多个字段分解为更多个字段。
9. 同步的配置界面化,操作方便、易使用。
10. 对网络连接断开后能够保证同步数据的不丢失,网络连上后能接着继续同步。
11. 对异常的信息提示尽量多,比如配置系统时对不正确的配置及时提示,以便产生同步的异常。
12. 当是多个数据库同步到一个数据库时需要解决同步冲突。
13. 系统需要有一定扩展性。
3.3 性能需求
1. 精度:
1) 服务器端的增量数据能够准确的同步到客户端,不应该存在数据被截断的情况。
2) 数据传输过程中对数据丢失的情况,应该不影响同步数据的完整性。
2. 时间特性要求:
1) 同步操作对其它正常的数据库应用,无明显性能降低现象。
2) 对配置了实时性同步的,同步延迟应小于1分钟(除网络断开等异常情况)。
3. 灵活性
1) 同步的字段可动态配置,当添加、修改字段后可以通过简单的配置来实现修改后的同步。
3.4 输入输出要求
输入:服务器端数据的改变。
处理:字段合并,分解或者是一定的运算加工。
目 录
1 引言 1
1.1 课题背景 1
1.2 国内外研究现状 1
1.3 本课题研究的意义 2
1.4 本课题的研究方法 2
2 WEB SERVICE数据库同步原理 3
2.1 WEB SERVICE构成与特点 3
2.1.1 Web Servcie的结构 3
2.1.2 Web Servcie的关键技术---协议 3
2.1.3 Web Servcie的特点 4
2.1.4 Web Servcie安全 5
2.2 数据库复制的分类 5
2.3 复制数据的类型 6
2.4 数据捕获技术 7
2.5 冲突检测 8
3 需求分析 9
3.1 同步环境 9
3.2 功能需求 9
3.3 性能需求 10
3.4 输入输出要求 10
3.5 运行需求 10
4 方案设计 11
4.1 数据库同步复制模型 11
4.2 数据库设计 11
4.2.1 源结点Sql Server 2000表设计 11
4.2.2 目的结点Oracle表设计 12
4.3 模块设计 13
4.3.1 数据捕获部分 13
4.3.2 同步部分 13
4.3.3 冲突检测处理部分 16
5 代码实现 16
5.1 开发环境 16
5.2 关键代码详解。 16
5.2.1 数据捕获部分 16
5.2.2 同步部分 17
6 测试 19
6.1 功能测试 19
6.2 性能测试 20
结 论 21
参考文献 21
致 谢 23
相关热词:NET 131 基于 WebService 数据
上一篇:【.NET】132 基于Web的新闻发布系统