搜档网
当前位置:搜档网 › goldengate for workshop

goldengate for workshop

GoldenGate实施参考

安装信息收集 ?收集客户信息(建议至少提前两周) –测试/生产环境 –操作系统列表 –数据库列表 –数据库日志增量评估 ?每天日志增量、峰值日志增量 –网络配置:带宽、端口等 ?带宽评估(如带宽不足,是否需要启动压缩,压缩对CPU占用测试)–数据结构 ?包括表数量、是否存在无主键表、是否有不支持数据类型等 –验证OGG版本可用性! ?针对不同的操作系统和数据库版本下载需要的OGG版本并安装测试

带宽估算 ?根据峰值产生日志量估算带宽占用 ?假设条件 –假设OGG队列与日志比例为1:4。如只复制部分表则此比例可以假设为更低。 –假设网络传输效率为0.7 –假设网络传输压缩比例为1:8。根据数据内容有所变化,一般字符数据较多时压缩比例较大,二进制对象压缩效率较低?带宽估算算法 –以客户业务高峰期每小时产生40G为例,可以估算如下 带宽=40G/3600(秒/小时)/4(日志过滤比例)/8(压缩比率)* 8(每字节8位)/0.7(网络传输效率)=4Mbps

无主键表的复制 ?GoldenGate可以正常复制无主键表,以所有列作为基准代替主键 强烈建议排除掉无主键表或者增加主键(或唯一索引)?强烈建议排除掉无主键表或者增加主键 –一般为临时表或者历史表 –导致附加日志增量较大,可能影响生产系统性能 –目标端replicat投递效率非常低且无法进行优化 –容易出现数据不一致且不易修复 –无法使用HANDLECOLLISIONS ?该参数依赖于表的主键进行逻辑判断,无主键表使用该参数会导 致重复记录出现

Oracle_11G搭建单实例GoldenGate步骤

Oracle 11G 搭建单实例GoldenGate步骤 1 GoldenGate安装准备 在Oracle官网上下载GoldenGate介质,GoldenGate是包含在Fusion Middleware 类目下面,并上传到源数据库和目标数据库主机; 2 GoldenGate安装过程 注意:此步骤需要在两台主机上操作 2.1 创建GoldenGate操作系统用户 这里直接使用Oracle用户安装GoldenGate,而不创建新的用户。 2.2 创建GoldenGate安装路径 [root@GMDBA ~]# mkdir -p /u01/ggs/11.2.0 [root@GMDBA ~]# mv /u01/software/ogg112101_fbo_ggs_Linux_x86_ora11g_32bit.zip /u01/ggs/11.2.0/ [root@GMDBA ~]# chown -R oracle:oinstall /u01/ggs/ [root@GMDBA ~]# su - oracle 2.3 编辑用户环境变量 [oracle@GMDBA ogg]$ vi ~/.bash_profile # .bash_profile # Get the aliases and functions if [ -f ~/.bashrc ]; then . ~/.bashrc Fi # User specific environment and startup programs PATH=$PATH:$HOME/bin

export PATH export ORACLE_SID=GMDBA export ORACLE_BASE=/u01/app/oracle export ORACLE_HOME=$ORACLE_BASE/product/11.2.0/dbhome_1 export PATH=$ORACLE_HOME/bin:/u01/ggs/11.2.0:$PATH export LD_LIBRARY_PATH=$ORACLE_HOME/lib:/u01/ggs/11.2.0:/lib alias sqlplus='rlwrap sqlplus' alias rman='rlwrap rman' 2.4 安装GoldenGate文件 [oracle@GMDBA ~]$ cd /u01/ggs/11.2.0/ [oracle@GMDBA 11.2.0]$ unzip ogg112101_fbo_ggs_Linux_x86_ora11g_32bit.zip Archive: ogg112101_fbo_ggs_Linux_x86_ora11g_32bit.zip inflating: fbo_ggs_Linux_x86_ora11g_32bit.tar inflating: OGG_WinUnix_Rel_Notes_11.2.1.0.1.pdf inflating: Oracle GoldenGate 11.2.1.0.1 README.txt inflating: Oracle GoldenGate 11.2.1.0.1 README.doc [oracle@GMDBA 11.2.0]$ tar -xvf fbo_ggs_Linux_x86_ora11g_32bit.tar [oracle@GMDBA 11.2.0]$ cd [oracle@GMDBA ~]$ cd /u01/ggs/11.2.0 [oracle@GMDBA 11.2.0]$ ggsci Oracle GoldenGate Command Interpreter for Oracle Version 11.2.1.0.1 OGGCORE_11.2.1.0.1_PLATFORMS_120423.0230_FBO Linux, x86, 32bit (optimized), Oracle 11g on Apr 23 2012 08:09:25 Copyright (C) 1995, 2012, Oracle and/or its affiliates. All rights reserved.

AIX 系统下GOLDENGATE 安装配置文档

AIX 系统下GOLDENGATE 安装配置文档 - 省直项目数据同步政府事业部(东北大区辽宁研发中心)周健 摘要 Oracle GoldenGate软件是一种基于log(日志)的结构化数据复制软件,它通过解析源数据库在线log或归档log获得数据的增、删、改变化,再将这些变化应用到目标数据库,实现源数据库与目标数据库同步、双活。Oracle GoldenGate 软件可以在异构的IT基础结构(包括几乎所有常用操作系统平台和数据库平台)之间实现大量数据亚秒级的实时复制,其复制过程简图如下: 背景 省直养老保险项目需要开办网上申报系统实现单位网上办事,提高业务经办效率,提升社保中心的整体服务水平。 数据同步接口设计

社保网上服务系统由两个数据库组成:社保系统生产库,网上申报中间库。 1、社保系统生产库: 此库是社保系统生产数据库,存放着所有社保系统核心业务数据。 2、网上申报系统中间库: 此库是网上申报业务实用的核心数据库,它存放着单位结算的查询信息、业务 办理的审批信息、以及企业的申报信息。 社保网上查询使用的数据从中间库取得,通过数据增量同步完成社保生产库和 中间库之间的数据交换。数据同步的周期根据系统的时间运转状况决定,设计中 暂定一天进行一次核对,时间定在晚间20:00点开始,涉及的同步数据用户包括 社保生产库的养老用户(lnsi_yl)和医疗用户(lnsi_yb)。 数据同步目的 网上申报系统需要提供接口能够让参保人员通过英特网进行查询参保和缴费信息以及能够申报自己的缴费基数等信息,这样就必然使外部人员可以访问数据库,从而产生数据库被攻击和篡改的风险。我们通过数据同步就可以实现外网数据和内网数据分离,让外部人员只能访问中间库,不会影响到生产库的安全。

GoldenGate监控工具GoldenGate Monito11.1安装配置

GoldenGate Web界面监控工具GoldenGate Monitor的安装、配置及监控 2011年12月

目录 1GoldenGate Monitor介绍 (3) 2环境需求 (4) 2.1Hardware (4) 2.2Software (5) 3安装Monitor Server (5) 3.1安装环境 (5) 3.2创建组和用户 (6) 3.3创建Repository用户 (6) 3.4安装Monitor Server (6) 4配置GoldenGate (14) 4.1配置需求 (14) 4.2配置环境 (14) 4.3需求描述 (15) 4.4检查Monitor Agent安装组件 (15) 4.5源端配置GoldenGate (16) 4.5.1环境变量 (16) 4.5.2Enabling Monitoring (16) 4.5.3配置cfg\Config.properties (16) 4.5.4创建Oracle Wallet (17) 4.5.5启动GoldenGate Manager (17) 4.5.6配置Extract进程及pump进程 (17) 4.6目标端配置GoldenGate (18) 4.6.1环境变量 (18) 4.6.2Enabling Monitoring (18) 4.6.3配置cfg/Config.properties (18) 4.6.4创建Oracle Wallet (19) 4.6.5启动GoldenGate Manager (19) 4.6.6配置Replicat进程 (19) 4.7测试验证 (20) 5GoldenGate Monitor Web (22) 5.1查看当前Lag、Status信息及Message (22) 5.2问题区域 (24) 5.3查询历史事件 (25) 5.4告警条件定义 (27) 6参考 (27)

OGG(oracle+GoldenGate)学习笔记

Oracle GoldenGate测试文档 1.Oracle GoldenGate介绍 (1) 2.Oracle GoldenGate For Oracle(windows 平台) 安装 (5) 3.数据库复制实施文档(DML) (7) 3.1准备工作 (7) 3.2配置GoldenGate (8) 3.2.1配置SourceDB的GoldenGate (8) 3.2.2 配置TargetDB的GoldenGate (9) 3.3 测试DML操作 (11) 4.GoldenGate Support DDL安装 (15) 5.玩玩GoldenGate (23) 1.Oracle GoldenGate介绍 GoldenGate TDM(交易数据管理)软件是一种基于日志的结构化数据复制软件,它通过解析源数据库在线日志或归档日志获得数据的增删改变化,再将这些变化应用到目标数据库,实现源数据库与目标数据库同步、双活。GoldenGate TDM 软件可以在异构的IT基础结构(包括几乎所有常用操作系统平台和数据库平台)之间实现大量数据亚秒一级的实时复制,其复制过程简图如下: 如上图所示,GoldenGate TDM的数据复制过程如下: 利用捕捉进程(Capture Process)在源系统端读取Online Redo Log或Archive Log,然后进行解析,只提取其中数据的变化如增、删、改操作,并将相关信息转换为GoldenGate TDM自定

义的中间格式存放在队列文件中。再利用传送进程将队列文件通过TCP/IP传送到目标系统。捕捉进程在每次读完log中的数据变化并在数据传送到目标系统后,会写检查点,记录当前完成捕捉的log位置,检查点的存在可以使捕捉进程在中止并恢复后可从检查点位置继续复制; 目标系统接受数据变化并缓存到GoldenGate TDM队列当中,队列为一系列临时存储数据变化的文件,等待投递进程读取数据; GoldenGate TDM投递进程从队列中读取数据变化并创建对应的SQL语句,通过数据库的本地接口执行,提交到数据库成功后更新自己的检查点,记录已经完成复制的位置,数据的复制过程最终完成。 由此可见,GoldenGate TDM是一种基于软件的数据复制方式,它从数据库的日志解析数据的变化(数据量只有日志的四分之一左右)。GoldenGate TDM将数据变化转化为自己的格式,直接通过TCP/IP网络传输,无需依赖于数据库自身的传递方式,而且可以通过高达9:1的压缩率对数据进行压缩,可以大大降低带宽需求。在目标端,GoldenGate TDM可以通过交易重组,分批加载等技术手段大大加快数据投递的速度和效率,降低目标系统的资源占用,可以在亚秒级实现大量数据的复制,并且目标端数据库是活动的 GoldenGate TDM提供了灵活的应用方案,基于其先进、灵活的技术架构可以根据用户需求组成各种拓扑结构,如图所示:

GOLDENGATE MONITOR11.2.1安装手册

1、环境说明 2、文件系统设计2.1 文件系统规划 2.2 文件系统创建 --创建/monitor文件系统: # lvcreate -L 100G -n lvmonitor rootvg

# mkfs -t ext3 /dev/rootvg/lvmonitor # mkdir /monitor # mount /dev/rootvg/lvmonitor /monitor --创建/oradata文件系统: # lvcreate -L 100G -n lvoradata rootvg # mkfs -t ext3 /dev/rootvg/lvoradata # mkdir /oradata # mount /dev/rootvg/lvoradata /oradata --创建/u01文件系统: # lvcreate -L 50G -n lvu01 rootvg # mkfs -t ext3 /dev/rootvg/lvu01 # mkdir /u01 # mount /dev/rootvg/lvu01 /u01 2.3 修改/etc/fstab vi /etc/fstab 添加如下内容: /dev/rootvg/lvu01 /u01 ext3 defaults 1 2 /dev/rootvg/lvoradata /oradata ext3 defaults 1 2 /dev/rootvg/lvmonitor /monitor ext3 defaults 1 2 3、资料库安装 3.1 操作系统配置 3.1.1 检查操作系统包 rpm -q --qf '%{NAME}-%{VERSION}-%{RELEASE} (%{ARCH})\n' binutils \ compat-libstdc++-33 \ elfutils-libelf \ elfutils-libelf-devel \ gcc \ gcc-c++ \ glibc \

GoldenGate运维手册

GOLDENGATE运维手册 2014年4月 文档修改记录

目录 1OGG常用监控命令------------------------------------------------------------- 5

1.2启动GoldenGate进程 ----------------------------------------------------------------------- 5 1.3停止GoldenGate进程 ----------------------------------------------------------------------- 6 1.4查看整体运行情况---------------------------------------------------------------------------- 8 1.5查看参数设置 ---------------------------------------------------------------------------------- 9 1.6查看进程状态 ---------------------------------------------------------------------------------- 9 1.7查看延时--------------------------------------------------------------------------------------- 10 1.8查看统计信息 -------------------------------------------------------------------------------- 11 1.9查看运行报告 -------------------------------------------------------------------------------- 11 2OGG的常见运维任务指南------------------------------------------------------ 13 2.1配置自动删除队列-------------------------------------------------------------------------- 13 2.2配置启动MGR时自动启动Extract和Replicat进程----------------------------- 13 2.3配置MGR自动重新启动Extract和Replicat进程-------------------------------- 14 2.4长事务管理------------------------------------------------------------------------------------ 14 2.5表的重新再同步(需时间窗口) ------------------------------------------------------ 17 2.6表的重新再同步(无需时间窗口)--------------------------------------------------- 17 3数据结构变更和应用升级------------------------------------------------------ 19 3.1(仅复制DML时)源端和目标端数据库增减复制表 -------------------------- 19 3.2(仅复制DML时)修改表结构 -------------------------------------------------------- 21 3.3(仅复制DML时)客户应用的升级 ------------------------------------------------- 21 3.4配置DDL复制自动同步数据结构变更----------------------------------------------- 23 (一)是否打开DDL复制 ------------------------------------------------------------------------------------- 23 (二)打开DDL复制的步骤 ---------------------------------------------------------------------------------- 23 (三)DDL复制的典型配置----------------------------------------------------------------------------------- 25 4异常处理预案---------------------------------------------------------------- 26 4.1网络故障--------------------------------------------------------------------------------------- 26 4.2RAC环境下单节点失败 ------------------------------------------------------------------- 27 4.3Extract进程常见异常 ---------------------------------------------------------------------- 27 4.4Replicat进程常见异常--------------------------------------------------------------------- 28 4.5异常处理一般步骤-------------------------------------------------------------------------- 28 5附录------------------------------------------------------------------------ 30 5.1Oracle GoldenGate V11.1数据复制限制 --------------------------------------------- 30 (四)不支持文件等非结构化数据复制------------------------------------------------------------------ 30 (五)Oracle数据类型限制 ----------------------------------------------------------------------------------- 30

GoldenGate_Director配置手册

Oracle GoldenGate Director配置手册 一.GoldenGate Director介绍 GoldenGate Director可以简化GoldenGate的监控和管理,可以通过图形界面或者web浏览器方便快捷的维护整个环境中的GoldenGate组件。 二.GoldenGate Director的组件 2.1 结构图如下 2.2 GoldenGate instances 每个实例就是一个ggsci的mgr进程,我们只要指定相应的IP(dns)和端口就可以连接到该实例,对于大规模的应用,最好采用dns解析的方式。 2.3 GoldenGate Director Server 管理所有连接的实例,这个server是基于weblogic的。主要包含一些应用程序和Monitor Agent

用于存储GoldenGate Director的信息,包括用户,组,拓扑图,event等等的信息 2.5 GoldenGate Director Client 通过图形界面管理实例 2.6 GoldenGate Director Web 这应该是大家最喜欢的工具了,可以通过web界面监控当前环境下的golden gate进程2.7 GoldenGate Director Administrator 用于配置Director Server 三.GoldenGate Director的安装 3.1 安装weblogic GoldenGate Director是运行在weblogic上的一个服务,所以必须先安装weblogic 安装比较简单,过程省略 3.2 准备数据库 数据库是用于GoldenGate Director database,目前只支持以下三种 ?MySQL 5.x Enterprise version. ?SQL Server 2000 and 2005 ?Oracle 9i or later. 我一般都选用mysql,因为量级轻,速度快,便于管理。特别提示要提前准备一个用户,该用户的密码必须是8位 安装过程省略 3.3 安装GoldenGate Director 执行gg-director-serversetup_unix_*.sh开始安装server 执行gg-director-client_unix_*.sh开始安装client端 安装过程都很简单,只要按照提示输入相应的值就好了。 四.管理配置

GoldenGate_Oracle数据仓库解决方案——集中复制配置

Oracle GoldenGate 数据仓库解决方案 集中复制适宜的环境 集中复制的优缺点 多对一数据同步(集中复制) 多对一数据同步架构: 多对一数据同步实现方式同一对多,也是将extract-replicat将进程拆分成多个。 多对一同步需要注意的是,所有源端和目标端的表都应该使用一致的主键约束,而且在不同的源端不应该对同一键值的数据进行维护。也就是说,需要在业务上将不同源的数据隔

离开来,以防止对同一数据的覆盖更改等问题。一般用于维护业务的区域性数据、然后统一同步到业务中心数据源的业务场景。 还有一个需要注意的方面是TRUCATE的捕获,在多对一的配置下应避免捕获。因为GoldenGate处理TRUNCATE同步是直接传输了这个语句,并不会提供具体删除的数据信息(没有REDO也无法提供),所以无论哪个源端执行了TRUNCATE,如果同步到了目标端,都会直接把目标端的表数据直接删光,无论目标数据是否是来源于这个源,造成数据的不一致。 oracle goldengate 容灾、双业务详细配置 SourceDB: 192.168.1.150:7809 192.168.1.151:7809 TargetDB: 192.168.4.252:7809 软件准备: 1.Oracle10. 2.0.1 2.ggs_Windows_x86_ora10g_32bit 3.wls1033_win32 4.gg-director-serversetup_win_v11_1_1_1_0_001 5.gg-director-clientsetup_win_v11_1_1_1_0_001 ============================== Weblogic Server 11g 用户 weblogic/12345678 Oracle DataaBase 添加用户 Oracle GoldenGate Director Server11.1.1.1.0_001 专用 database user: ggserver/ggserver11 配置 alter database add supplemental log data; alter database add supplemental log data (primary key,unique,foreign key) columns; GoldenGate用户 专用 gatedba/gatedba 测试同步用户 gate01/gate01 ===================== 步骤:

Oracle Goldengate Monitor12c安装配置指南12.1.3

Oracle Goldengate Monitor 12c安装配置指南 1、架构 2、12c版monitor安装流程 Monitor server的安装: 检查前提要求->OUI安装monitor server->RCU(Repository Configuration Utility)创建数据结构->使用向导为oracle数据库创建weblogic domain(如果非oracle数据库如:mysql 或sqlserver,参考手册中的1.5和4.2)-> 手工配置完成domain的创建-> 启动monitor server -> welogic中用户的配置。 Monitor agent的安装: 安装monitor agent -> 创建和配置agent实例

3、Monitor Server的安装 3.1 前提要求 Monitor server: 需要安装JDK1.7(参考director安装) Orace11g或12c(mysql5.5、sqlserver2008,2012),字符集AL32UTF8 Weblogic12c(12.1.3),但是需要下载的包是:Oracle Fusion Middleware 12c (12.1.3.0.0) Infrastructure,单weblogic无效。 /etc/hosts文件: Monitor server和被监控的主机之间配置上hosts文件解析,都含有monitor server和agent 的条目 建议monitor server单独放一台机器,和agent所在不混用。 3.2 安装Oracle Fusion Middleware 12c (12.1.3.0.0) Infrastructure

Oracle GoldenGate 安装、配置、管理

Oracle GoldenGate 安装、配置、管理 Oracle GoldenGate主要由如下一些组件组成 ● Extract ● Data pump ● Replicat ● Trails or extract files ● Checkpoints ● Manager ● Collector 1、Data Pump是一个次级的Extract Group,如果你的GG环境中不使用Data Pump的话,那么Primary Extract Group必须直接将trail通过网络写到Target系统上.参见后面的示例6:配置Data Pump实现一对多拓扑方案.

2、默认情况下,Replicat是实时复制的,如果因为某种需要需要延迟复制的话,那么可以通过Replicat Group的如下DEFERAPPLYINTERVAL参数来控制,该参数允许delay的最大时间是7天。 按照Oracle GoldenGate的工作原理和体系结构,在每个复制数据源和目标端都需要安装一套GoldenGate软件,同时需要分别启动一个 GoldenGate实例,一个GoldenGate实例就是一个管理进程(Manager process),这个管理进程也是整个GoldenGate实例运行时最主要的控制进程。 GoldenGate操作系统内存的使用是通过操作系统来控制的,而不是通过GoldenGate程序控制的,GoldenGate进程会根据需要从OS那里分配相应的virtual memory. l GoldenGate GGSCI命令接口工具对于每个GoldenGate实例可以支持并发300个Extract和Replicat进程。 l 每个Extract和Replicat进程需要大约25-55 MB内存,这主要取决于transaction的大小和并发的transaction数量。 所以,根据上面2个条件,GoldenGate对操作系统内存的需求主要取决于Extract和Replicat进程数。 工作目录 每个GoldenGate实例的工作目录(working directories and binaries),大约需要40M的空间,如果你要同一台Server安装多个GoldenGate实例到不同的目录/文件系统下话,那么就需要多倍的空间分配,在考虑空间分配的时候,也需要考虑这个因数。 辅助空间 这部分空间主要用于存放GoldenGate Trails,它包含了工作数据。这部分空间的消耗取决于Trail,依赖于将要处理的数据量。 根据实际的数据库系统的规模,每天产生的日志量的大小,建议这部分空间从1GB-100G不等,可以保存7-10天的GoldenGate队列文件即可。 对于RAC环境 对于RAC环境,GoldenGate的相关软件和工作目录需要配置在shared disk环境中,从而保证对所有node都是可用的,从任何一个node都可以启动GoldenGate的进程,当其中一个node出现异常时,可以在剩余的node启动而无须修改任何配置参数.否则如果运行在单个node上的话,需要将剩余node中的归档日志通过一定的技术共享出来并加载到

GoldenGate基本原理、安装过程和基本维护

目录 一、GoldenGate介绍 (3) 二、GoldenGate安装实施 (5) 2.1创建GoldenGate软件安装目录 (5) 2.2 GoldenGate的管理用户 (5) 2.3安装GoldenGate软件 (6) 2.4设臵数据库归档模式 (6) 2.5打开数据库的附加日志 (7) 2.6开启数据库强制日志模式 (7) 2.7创建GoldenGate管理用户 (7) 2.8编辑GLOBALS参数文件 (8) 2.9管理进程MGR参数配臵 (8) 2.10抽取进程EXTN参数配臵 (9) 2.11 传输进程DPEN参数配臵 (10) 2.12建立OGG的DDL对象 (11) 2.13 数据初始化 (12) 2.14 容灾端管理进程MGR参数配臵 (14) 2.15编辑GLOBALS参数文件 (15) 2.16 容灾端复制进程REPN参数配臵 (15) 2.17创建复制进程repn (17) 2.18启动生产端传输进程和容灾端复制进程 (17) 2.19测试场景 (17)

三.GoldenGate基本运维命令 (17) 四、常见故障排除 (18)

一、GoldenGate介绍 GoldenGate软件是一种基于日志的结构化数据复制软件。GoldenGate 能够实现大量交易数据的实时捕捉、变换和投递,实现源数据库与目标数据库的数据同步,保持亚秒级的数据延迟。 GoldenGate能够支持多种拓扑结构,包括一对一,一对多,多对一,层叠和双向复制等等。 GoldenGate基本架构

Oracle GoldenGate主要由如下组件组成 ●Extract ●Data pump ●Trails ●Collector ●Replicat ●Manager Oracle GoldenGate 数据复制过程如下: 利用抽取进程(Extract Process)在源端数据库中读取Online Redo Log或者Archive Log,然后进行解析,只提取其中数据的变化信息,比如DML操作——增、删、改操作,将抽取的信息转换为GoldenGate自定义的中间格式存放在队列文件(trail file)中。再利用传输进程将队列文件(trail file)通过TCP/IP传送到目标系统。 目标端有一个进程叫Server Collector,这个进程接受了从源端传输过来的数据变化信息,把信息缓存到GoldenGate 队列文件

GoldenGate Director 安装及配置文档

GoldenGate Director 安装及配置文档 目录 1.1概述 (2) 1.2G OLDEN G ATE D IRECTOR概述 (2) 1.3G OLDEN G ATE D IRECTOR的安装 (3) 1.3.1部署方案必需条件 (3) 1.3.1.1Director服务器安装前提 (3) 1.3.1.2Director客户端安装前提 (3) 1.3.2安装GoldenGate Director Server (4) 1.3.3安装GoldenGate Director Client (7) 1.3.4启动GoldenGate Director Server/Client (7) 1.4G OLDEN G ATE D IRECTOR的配置使用 (8) 1.4.1Director Admin (8) 1.4.2基于Web的Director客户端 (11) 1.4.2.1监控整体运行情况 (12) 1.4.2.2监控进程状态 (13) 1.4.2.3查看事件日志 (13) 1.4.2.4Email告警 (14) 1.4.2.5运行GGSCI命令 (15) 1.4.3基于C/S的Director客户端 (16) 1.4.3.1查看事件日志 (16) 1.4.3.2Email告警 (16) 1.4.3.3运行GGSCI命令 (17) 1.5参考文献 (18)

GoldenGate Director 安装及配置文档 1.1 概述 本章节所有文本均基于Oracle GoldenGate版本,主要描述GoldenGate Director的安装及配置使用。所有部署在生产系统的GoldenGate进程,均需要经过开发、测试小组严格认真的测试之后才可以进行部署。 介质下载地址https://https://www.sodocs.net/doc/cf7309761.html,,下载最新版11G的Management Pack for Oracle GoldenGate 11.1.1.0.0 Media Pack 1.2 GoldenGate Director概述 GoldenGate Director是GoldenGate的图形化监控管理软件,可以方便、集中管理多个GoldenGate 实例。平安集团需要部署多个GoldenGate实例,每个实例部署在一个单独的服务器上,如果使用命令行方式进行监控和维护,则每次都需要登录到每个单独的服务器,极不方便。使用GoldenGate Director,只需要事先配置好连接,就可以在统一界面中监控所有的GoldenGate实例。Director提供了两种图形化监控客户端,一种是基于Web方式,另一种是基于C/S。 下图描述了GoldenGate Director各个组件及其关系: GoldenGate Director 体系架构 1)GoldenGate Instances是需要被管理的实例。Director可以方便管理多个GoldenGate实例。 2)Director Server是Director服务端,需要部署在WebLogic Server下。Director服务器

goldengate安装手册(bigdata v12.2)

×××公司Oracle Goldengate安装手册

目录 1Goldengate安装说明 (3) 1.1 总体说明 (3) 1.2 添加环境变量 (3) 1.3 GG软件的安装(源和目标系统均需要安装) (4) 1.4 开启源端数据库附加日志 (5) 1.5数据库11.2.0.4版本参数修改 (6) 1.6 配置GLOBALS (6) 1.7 配置定义文件 (6) 1.8 建立OGG进程和队列 (6) 2数据初始同步 (11) 2.1 将源端数据导入之中间库 (11) 2.2 将中间库数据导入至Hadoop (11) 2.3 目标启动replicat进程并追加增量数据 (11)

1 Goldengate安装说明 1.1 总体说明 Goldengate软件目录的属主为oracle:dba,权限为775; Goldengate目录一般是建立在共享存储上,这样实际上goldengate的软件和相应的文件如参数文件,队列文件等都是在共享存储上的。这样做的好处是,例如在RAC环境下,如果一台服务区宕机,则可以将$GG_HOME mount到另外一个正常的rac节点上,启动goldengate各个进程就可以了,不需要做任何其他的动作; 本次测试过程是部署在gpfs文件系统上。 1.2 添加环境变量 在oracle用户下增加环境变量: 源端: export GG_HOME=/data/oggo export PATH=$PATH:$GG_HOME export LIBPATH=$GG_HOME:$ORACLE_HOME/lib 目标端bigdata:要求必须jdk1.7 export GG_HOME=/data/oggt export PATH=$PATH:$GG_HOME export LD_LIBRARY_PA TH=$GG_HOME:/usr/lib/jvm/java-1.7.0-openjdk-1.7.0.45.x86_64/jre/lib/amd 64/server Platform Environment variable IBM AIX LIBPATH HP-UX SHLIB_PA TH Sun Solaris LD_LIBRARY_PATH HP Tru64 (OSF/1)

GoldenGate在Windows平台的配置

ORACLE GoldenGate在Windows 平台中单向、双向数据传输配置 1、安装GoldenGate环境 源数据库平台:64位Windows server2008Oracle11.2.0.1.0 目标数据库平台:64位Windows server2008Oracle11.2.0.1.0 源数据库:服务器名称:SERVER1,ip:192.168.1.101 目标数据库:服务器名称:SERVER3,ip:192.168.1.102 源数据库:归档模式,ORACLE_SID:orcl用户:scott goldengate专属用户:ggs01目标数据库:归档模式,ORACLE_SID:orcl用户:scott goldengate专属用户:ggs 2、分别在源数据库,目标数据库安装GoldenGate 官方文档要求用administrator权限安装(需要系统管理员的权限) 双击GoldenGate目录下的ggsci.exe GGSCI(SERVER1)1>CREATE SUBDIRS GGSCI(SERVER1)1>EXIT 3、把源数据库的修改数据同步到目标数据库中 3.1在源数据库orcl上打开归档日志及其辅助日志 Sql>alter database add supplemental log data; SQL>alter system set recyclebin=off; Sql>alter system switch logfile; 3.2在源数据库,目标数据库创建GoldenGate GLOBALS参数文件 3.2.1在源数据库创建 GGSCI>edit params./GLOBALS 内容:MGRSERVNAME mgrserver01

Goldengate配置手册

目录 1综述-------------------------------------------------------------------------- 1.1目的 ------------------------------------------------------------------------------------------------- 1.2原则 ------------------------------------------------------------------------------------------------- 2OGG设计原则------------------------------------------------------------------ 2.1OGG的版本及下载 ----------------------------------------------------------------------------- 2.2GoldenGate运行用户-------------------------------------------------------------------------- 2.3为GoldenGate运行用户配置环境变量 -------------------------------------------------- 2.4网络设置------------------------------------------------------------------------------------------- 2.5GoldenGate安装位置-------------------------------------------------------------------------- 2.6OGG DDL复制 ------------------------------------------------------------------------------------ 2.7OGG数据复制链路结构 ---------------------------------------------------------------------- 2.8OGG进程命名规则 ----------------------------------------------------------------------------- 2.8.1总述-------------------------------------------------------------------------------------------------------------- 2.8.2主Extract进程命名规则 ---------------------------------------------------------------------------------- 2.8.3本地队列命名规则------------------------------------------------------------------------------------------ 2.8.4Data Pump Extract进程命名规则----------------------------------------------------------------------- 2.8.5本地队列命名规则------------------------------------------------------------------------------------------ 2.8.6Replicat进程命名规则 ------------------------------------------------------------------------------------- 2.9OGG进程数量设计 ----------------------------------------------------------------------------- 2.9.1主Extract进程设计----------------------------------------------------------------------------------------- 2.9.2Data Pump进程设计 --------------------------------------------------------------------------------------- 2.9.3Replicat进程设计-------------------------------------------------------------------------------------------- 3GG实施步骤------------------------------------------------------------------- 3.1准备 ------------------------------------------------------------------------------------------------- 3.2创建运行GoldenGate的用户 --------------------------------------------------------------- 3.3安装GoldenGate -------------------------------------------------------------------------------- 3.4添加变量------------------------------------------------------------------------------------------- 3.5增加附加日志 ------------------------------------------------------------------------------------ 3.6OGG源端配置------------------------------------------------------------------------------------ 3.6.1MGR进程参数模板 ----------------------------------------------------------------------------------------- 3.6.2主Extract进程参数模板 ---------------------------------------------------------------------------------- 3.6.3Data Pump传输进程参数模板 --------------------------------------------------------------------------

相关主题