iDBPad-数据整合平台用户手册.doc

iDBPad数据整合平台 用户手册 有感兴趣的朋友，请联系QQ: 6 3 2 9 6 3 8 3 2 目 录 第一章、系统介绍 2 1.1概要 2 1.2基础概念 2 1.3功能特点 5 1.4体系结构 7 1.5应用案例 10 第二章、系统安装 10 2.1 Windows环境安装 10 2.2 Unix环境安装 16 第三章、管理工具 17 3.1系统配置 17 3.1.1节点配置 17 3.1.2目录接口配置 18 3.1.3系统管理概述 20 3.2监控管理 21 3.2.1系统管理 21 3.2.2路由管理 22 3.2.3数据传输管理 30 3.2.4数据抽取配置 33 3.2.5数据装载配置 36 3.2.6日志监控 37 3.2.7系统分析 39 3.2.8数据库监控 41 第四章、开发接口 42 4.1编程步骤 42 4.2函数参考 43 第一章、系统介绍 1.1概要 什么是iDBPad IDBPad是解决‘数据’跨平台、跨数据库同步的一个独立的软件工具平台是面向异构数据库整合应用的数据整合系统类的产品。 GB容量的大型数据文件。 iDBPad能够将一个数据库中的数据变化从源库中同步到目的库中，从而保持两个数据库的内容是完全一致的，并且还提供强大的ETL功能，可以方便的对现有数据进行抽取、转换和装载。 iDBPad通过添加加密插件，提供安全的数据传输。 iDBPad提供数据发送和接收的操作命令，只需通过配置就可以完成数据的传输；此外，iDBPad也提供实用的API接口，极大的方便了应用程序的开发。 1.2基础概念 消息 在分布式应用中，不同的应用进程之间交互的信息统称为消息。消息由消息的内容及接收者名单组成，消息的内容及格式由消息的提供者及接收者协商而定。在形式上消息可表现为一个小的数据包，亦可表现为一个很大的文件。 交换节点 具有自己专用的iDBPad系统运行环境及配置的实体，称为交换节点（也称交换中心）。其负责数据报文的转发。该实体可以通过运行iDBPad软件的守护进程，从而成为一个活动的iDBPad节点。 数据节点 iDBPad系统交换中心的客户端，负责报文的本地发送和落地，称为数据节点（也称交换客户端）。每个交换节点都可以有多个数据节点。 应用 与具体业务有关的程序，它通过iDBPad系统接口函数与iDBPad系统交互。 数据可靠传输 数据可靠传输指数据的传递在时间上无特殊要求，在网络连通的情况下必须保证数据可靠的传递到目标节点。iDBPad系统在数据提交后，在遇到可恢复的故障（如机器故障、网络故障）情况下，仍然能够保证数据的可靠传输。 队列 iDBPad系统中的队列是一种可靠的队列，用于存储应用程序发送的或是准备接收的文件与消息。它能够保证标准交换数据可靠的传输，即使网络中断、机器重启、突然断电。 断点续传 如果文件在传输过程中由于意外原因而引起传输失败，当系统恢复后，iDBPad系统可以从传输失败点继续发送该文件，而不必将整个文件重新发送。通过断点续传机制，既可以有效减少高故障率网络上的冗余通讯量，又可以避免极端情况下，文件传输的反复失败重传。 同步方式 发送消息后，必须等待接收方的确认或应答后才进行后续的处理。 异步方式 发送消息后，不必等待接收方的确认或应答即可进行后续的处理，然后在适当的时候接收确认或应答。 持久消息 在发送和接收持久消息时首先将消息在数据库中作永久性存储，遇到故障时可以根据数据库中的内容重传消息，保证消息的可靠传输。 生命周期 是消息的属性之一。是指消息的生存时间，超过这一时限，则停止对消息的传送，放入死信队列。生命周期主要是针对异步消息的，如一个开会通知在会议结束后便无意义，就可以通过生命周期来控制。 优先级 可以对消息赋予不同的优先级别，最高0级，最低9级。在源结点上，级别高的消息将会被优先发送；在目标结点上，级别高的消息将会优先被应用取出。每处理一定数量的高级别消息，也会处理少量低级别的消息，通过这种策略来防止大量的高级别消息造成低级别消息无法发送。 压缩传输 设置消息压缩属性，指定对一个消息进行压缩，有效地利用网络带宽。 消息的路由 当目标结点不能真接到达时，需要设置中间的路由结点，通过路由结点转发消息，到达目标结点。 DTP 参考模型 DTP 是分布式事务处理（ Distributed Transaction Process）的英文缩写。该参考模型由X/OPEN组织定义，它认为一个分布式应用系统由四个模块组成：应用、资源管理者、事务管理者、通讯管理者。 发布订阅 发布订阅不同于点对点的消息传输模式，是一种一对多的消息组播模式。消息的提供者只需要发布一次，多个订阅者都可以接收到发布的消息。 主题 主题是沟通消息的发布者和消息的订阅者之间的虚拟通道。发布者将消息发布到