随笔分类 -  ogg

goldengate
OGG的一些常用网址
摘要:官网 GoldenGate软件下载地址 OGG 21c官方文档网站 OGG 21c官方文档PDF下载地址 GoldenGate所有版本文档地址 阅读全文

posted @ 2021-09-05 22:26 margiex 阅读(323) 评论(0) 推荐(0)

ogg初始化抽取的快速配置方法一: 将存量数据落地为标准trail
摘要:源端抽取进程 此进程与普通的select操作类似,只是从某个时间点开始读取表里的数据。 exinit.prm extract exinit userid ogg, password ogg reportcount every 1 miniutes rate extfile ./dirdat/ei, 阅读全文

posted @ 2021-09-01 18:12 margiex 阅读(818) 评论(0) 推荐(0)

利用GoldenGate 21实现mysql8远程DDL同步
摘要:测试架构 配置 修改mysql8的配置my.cnf [mysqld] server_id=1 #binlog-ignore-db=oggddl binlog_format=ROW log-bin=mysql-bin log_bin_index=/var/lib/mysql/mysql-bin.ind 阅读全文

posted @ 2021-08-30 17:39 margiex 阅读(745) 评论(0) 推荐(0)

goldengate新版本中查看日志读取点
摘要:在goldengate新版本中通过info extract, showch不会显示recovery checkpoint对应的seqno/rba,有时候为了准确定位读取的日志,希望能看到相应的seqno. 通过info extract,可以看到当前读取点,如下: 以下是集成抽取,当前读取点默认也未显 阅读全文

posted @ 2021-03-03 11:06 margiex 阅读(557) 评论(0) 推荐(1)

Oracle GoldenGate现在支持从 PostgreSQL 捕获数据
摘要:Oracle GoldenGate PostgreSQL Capture支持已全面上市。自GoldenGate 12.1发行以来,已支持GoldenGate PostgreSQL交付(投递),并允许用户将数据从GoldenGate支持的异构数据库复制到PostgreSQL数据库。除了GoldenGa 阅读全文

posted @ 2020-07-16 23:17 margiex 阅读(1055) 评论(0) 推荐(0)

GoldenGate 2020.7 发布新特性 - 19.1.0.0.200714
摘要:PostgreSQL 支持从PostgreSQL 10及以上版本的数据抽取(从ogg11.2开始,已经支持向PostgreSQL投递) PostgreSQL enhanced to provide Extract support for PostgreSQL version 10 and above 阅读全文

posted @ 2020-07-15 16:58 margiex 阅读(476) 评论(0) 推荐(0)

GoldenGate如何修改抽取进程的读取点?
摘要:在GoldenGate的运维过程中,经常会因为某些原因,需要修改源端抽取进程的读取点,比如从指定时间开始解析日志。 操作命令如下: GGSCI>alter extract ex2, begin 2020-04-22 10:00:00 以上命令即可将抽取进程的读取点改到2020.4.22 10点整,O 阅读全文

posted @ 2020-05-11 12:03 margiex 阅读(1456) 评论(0) 推荐(0)

GoldenGate 19.1实时文本文件加载攻略
摘要:前言 传统的数据仓库存储分析平台,常见的有Oracle, Teradata, Greenplum, Netezza, MySQL集群等;利用Oracle GoldenGate,可以实现从业务系统到这些数据仓库平台的实时加载,从而实现准实时的数据分析。除Oracle Exadata平台外,针对频繁的O 阅读全文

posted @ 2020-04-15 15:22 margiex 阅读(784) 评论(0) 推荐(0)

验证ogg同步数据库表无主键表且目标表包含隐藏字段
摘要:问题描述:已知:OGG在同步无主键的表时,OGG会自动设置表的全字段为主键,若目标表字段多于源表,同步过程中replicat进程可以读取insert操作但无法进行update/delete操作,从而导致replicat进程abend。探究:Oracle12c引入了一个新特性——隐藏字段,若将目标表多 阅读全文

posted @ 2019-09-20 15:08 margiex 阅读(1494) 评论(0) 推荐(0)

配置ogg从Oracle到PostgreSQL的同步复制json数据
摘要:标签:goldengate postgresql oracle json 测试环境说明 Oracle:Windows 8.1 + Oracle 12.2.0.1.0 + GoldenGate 12.3.0.1.2 for oracle IP:10.155.4.150 PostgreSQL:CentO 阅读全文

posted @ 2019-09-17 23:41 margiex 阅读(1093) 评论(0) 推荐(0)

GoldenGate 19.1 发布
摘要:GoldenGate 19.1 新特性For the Oracle Database ➢ Oracle Database 19c Support支持从Oracle DB 19c抽取和投递数据,包括云端和本地.➢ 集中的Key管理服务使用Oracle Key Vault集中管理目标端的加密Key➢ T 阅读全文

posted @ 2019-05-25 11:16 margiex 阅读(980) 评论(0) 推荐(0)

ogg同步DDL时,源和目标端表空间名称不同的解决思路
摘要:在OGG同步过程中,经常会碰上有创建表或表空间的同步,往往因为源和目标的平台不同,如aix linux or linux windows,这两个平台的表空间也经常不同,在目标端执行DDL时,可能会报错: OGG 00495 Oracle GoldenGate Delivery for Oracle, 阅读全文

posted @ 2019-04-18 13:30 margiex 阅读(1052) 评论(0) 推荐(0)

使用OGG添加唯一标识字段到目标表
摘要:利用GoldenGate,可以获取到变更记录在源端对应的redo日志序号,redo中的地址RBA,如果源端是RAC,还可以拿到源端节点的编号,通过这3个值,可以定位该变更记录的唯一性。 这些信息,在GoldenGate抽取时,可以通过内置函数获取得到,然后写入到trail中,从而在目标端通过toke 阅读全文

posted @ 2019-03-12 20:23 margiex 阅读(1247) 评论(0) 推荐(0)

ogg 12.3 for sqlserver 2016/2014 CDC模式配置
摘要:本文主要讲述ogg 12.3 通过CDC抽取mssqlserver 2016 enterprise的过程,以sqlserver为目标端投递配置相对简单,所以在此不在赘述。 针对以前的mssqlserver,是直接解析日志的模式,所以配置略有不同。 配置步骤概述 1. 解压ogg 12.3 for s 阅读全文

posted @ 2019-03-04 19:43 margiex 阅读(1855) 评论(0) 推荐(0)

OGG 18.1 for mysql远程捕获测试
摘要:Ogg18.1 remote capture要求mysql为5.7版本,只能从linux远程捕获mysql on windows or linux,且不支持DDL捕获。支持远程mysql为community/commerical版本。 源端数据库配置 OGG登录DB的用户及密码: ogg/Welco 阅读全文

posted @ 2018-11-06 15:29 margiex 阅读(2564) 评论(0) 推荐(0)

GoldenGate HANDLECOLLISIONS参数使用说明
摘要:HANDLECOLLISIONS在官方文档上的说明: 使用HANDLECOLLISIONS和NOHANDLECOLLISIONS参数来控制在目标上应用SQL时,Replicat是否尝试解决重复记录和缺少记录的错误。 事实是, HANDLECOLLISIONS 经常被烂用。为了省事,许多运维人员,经常 阅读全文

posted @ 2018-05-27 11:38 margiex 阅读(2485) 评论(0) 推荐(1)

GoldenGate for bigdata 12.3.2.1版本新特性
摘要:在Oracle Tenical Network(OTN)上已经可以下载到最新的ogg4bd版本,地址如下:http://www.oracle.com/technetwork/middleware/goldengate/downloads/index.html 新增加的特性如下: 支持以Cassand 阅读全文

posted @ 2018-05-20 12:11 margiex 阅读(902) 评论(0) 推荐(0)

GoldenGate 12.3 MA架构介绍系列(5) - 静默安装
摘要:软件下载地址 http://www.oracle.com/technetwork/middleware/goldengate/downloads/index.html 下载基于MicroService的介质后解压 创建 response file 以下是一个示例 $ more response/og 阅读全文

posted @ 2018-04-15 11:10 margiex 阅读(786) 评论(0) 推荐(0)

GoldenGate for Java adapter介绍二(代码篇)
摘要:ConnectionFactory } DriverClassConnectionFactory } OGG接口实现类SimpleJDBCHandler TestMariadb } 阅读全文

posted @ 2018-04-01 22:04 margiex 阅读(1195) 评论(4) 推荐(0)

GoldenGate 12.3 MA架构介绍系列(1) - 安装
摘要:注册ServiceManager为自启动服务。 Admin server: 用于创建用户、添加附加日志、创建抽取和投递进程,类似于以前的extract/replicat进程Distribution server:用于创建传输进程,类似于以前的extract 进程Receiver server:用于监 阅读全文

posted @ 2017-12-20 07:46 margiex 阅读(2357) 评论(0) 推荐(0)