OracleGoldengate实战项目总结.docxVIP

Oracle Goldengate 实战项目总结/oracleawenoracle_awen//blog2013-6-17目 录简介3OGG进程5OGG文件5下载goldengate6实战项目7源 端9一、安装前的检查9二、初始化ogguser用户9三、安装ogg软件10四、配置MGR进程及GLOBALS参数10五、添加附加日志11六、添加抽取和投递进程12七、配置抽取进程sextr0112八、配置投递进程spump0113九、开启相关进程13十、导出数据13目标端15一、安装前的检查15二、初始化ogguser用户15三、安装ogg软件16四、配置MGR进程及GLOBALS参数16五、添加复制进程17七、配置复制进程mrep_jj17八、初始化数据库19九、开启相关进程20十、测试复制进程20QATS211、归档和redolog在ASM中212、expdp 10g 到11g213、ASM监听blocked214、异构215、OGG目标端给字段赋值226、某个rba不存在227、跳过某个rba228、源端无主键239、IMP报错IMP-000082310、空格的困扰2311、EXP加flashback_scn参数报错EXP-001032312、多表同步到同一张表2313、队列文件大小和清理2414、初始化优化insert2415、Windows平台添加服务和卸载24简介Goldengate是一个用于在线系统数据库数据变化的采集，转换，并交付到另一个数据端的高性能软件，提供了基于日志的双向数据复制。Goldengate能确保核心业务系统7*24小时运行，将企业所有数据关联起来，利于做出最佳决策。主要特点和优点数据实时可靠，支持异构，高性能低影响，集成ETL、WEBLOGIC等部分功能，支持灵活的拓扑结构，基于事件的基础架构，数据加密，延期应用，自动内存管理。数据复制的拓扑结构双向复制工作原理图单向复制工作原理图解决方案OGG进程MGR管理进程，管理监控OGG其他进程，在源端和目标端各有一个MGR进程。Extract 抽取进程，从源端的数据表或者日志中捕获数据，并转换为队列文件。该进程只在源端运行。Pump 投递进程，负责从源端将队列文件传输到目标端。该进程只在源端运行。Replicate 复制进程，负责将队列文件应用到目标数据库。该进程只在目标端运行。如果是1对1，那么源端就是3个进程，目标端2个进程；如果是1对N，那么源端就是N+2个进程，每个目标端就是2个进程；如果是N对1，那么每个源端都是3个进程，目标端是N+1个进程。OGG文件trail 队列文件，由抽取进程生成，投递进程传输到目标端，复制进程应用这些队列文件到目标端。配置文件，GLOBALS 全局参数文件；MGR进程配置文件；抽取、投递、复制等配置文件；def 异构定义文件参数文件等。defgen 定义文件，在数据表异构的情况下在源端生成定义文件，传输到目标端，在目标端的复制进程配置文件中加入参数，使用该定义文件。discard 丢弃文件，记录复制进程不能应用的错误信息。下载goldengate下载地址：PS：建议同学们收藏这个网址，这里可以下载到oracle公司所有的产品，各种平台都有。选择产品类型：Oracle Fusion Middleware选择对应的平台：Linux x86选择对应版本的GoldenGate下载对应的数据库版本的安装包实战项目基本信息项目数据中心基建IP09OSWINSER2008 64WINSER2003 64数据库11g 6410g 64字符集ZHS16GBKUTF8OGG版本..2OGG用户ogguser/ogguserogguser/ogguserSCHEMAods_yyjc_buflpromis（T_JJ_*），stdpm进程名复制：mrep_jj抽取：sextr01 投递：spump01端口号7848（动态7840-7847）7848（动态7840-7847）队列文件./dirdat/va./dirdat/va同步表数据中心表名基建库表名项目安全基础信息T_JJ_XMAQJCXXT_JJ_XMAQJCXX安全月报重大风险T_JJ_AQYBZDFXT_JJ_AQYBZDFX中标信息T_JJ_ZBXXT_JJ_ZBXX业主项目部人员T_JJ_YZXMBRYT_JJ_YZXMBRY业主项目部基本情况T_JJ_YZXMBJBXXT_JJ_YZXMBJBXX项目工程信息T_JJ_XMGCT_JJ_XMGC工程审批情况T_JJ_GCSPQKT_JJ_GCSPQK单体工程进度信息T_JJ_DTGCJDT_JJ_DTGCJD单体工程信息T_JJ_DTGCT_JJ_DTGC年度进度计划下发T_JJ_NDJDJHXFT_JJ_NDJDJHXF建设管理