ogg hbase oracle版本,Oracle GoldenGate 同步数据至Hbase

末蓝、 2023-01-18 04:29 153阅读 0赞

该方法没试过，先记下再说

1、软件版本说明：

Goldengate 12c 12.2.0.1 for Oracle(源端)

Goldengate 12c 12.3.0.1 for Bigdata (目标端)

Java1.8

2、机器IP说明

源端IP地址(192.168.107.20)安装 Oracle12c，Oracle GoldenGate

目标端IP地址(192.168.107.23)，安装Hbase,OracleGoldenGate for BigData

3、源端的配置

4、目标 端的配置

\#在用户家目录下的 ~/.bash\_profile中配置用户的JAVA\_HOME，以及LIB\_PATH 环境变量。

export PATH

export JAVA\_HOME=/opt/jdk

exportLD\_LIBRARY\_PATH=$JAVA\_HOME/jre/lib/amd64/server/libjvm.so:$JAVA\_HOME/jre/lib/amd64/server/libjsig.so:$JAVA\_HOME/jre/lib/amd64/server:$JAVA\_HOME/jre/lib/amd64

\#使新加入的环境变量生效

source ~/.bash\_profile

\#进入 OGG安装目录

cd /opt/ogg

\#复制 hbase对应的配置文件。

cp AdapterExamples/big-data/hbase/\*dirprm/

cd/ogg/dirprm

编辑配置文件

vi hbase.props

gg.handlerlist=hbase

gg.handler.hbase.type=hbase

gg.handler.hbase.hBaseColumnFamilyName=cf

gg.handler.hbase.keyValueDelimiter=CDATA\[=\]

gg.handler.hbase.keyValuePairDelimiter=CDATA\[,\]

gg.handler.hbase.encoding=UTF-8

gg.handler.hbase.pkUpdateHandling=abend

gg.handler.hbase.nullValueRepresentation=CDATA\[NULL\]

gg.handler.hbase.authType=none

gg.handler.hbase.includeTokens=false

gg.handler.hbase.mode=tx

goldengate.userexit.timestamp=utc

goldengate.userexit.writers=javawriter

javawriter.stats.display=TRUE

javawriter.stats.full=TRUE

gg.log=log4j

gg.log.level=INFO

gg.report.time=30sec

\#Sample gg.classpath for Apache HBase

\#gg.classpath=/var/lib/hbase/lib/\*:/var/lib/hbase/conf/:

\#Sample gg.classpath for CDH

\#gg.classpath=/opt/cloudera/parcels/CDH/lib/hbase/lib/\*:/etc/hbase/conf

\#Sample gg.classpath for HDP

\#gg.classpath=/usr/hdp/current/hbase-client/lib/\*:/etc/hbase/conf

gg.classpath=/opt/hbase-1.2.6/lib/\*:/opt/hbase-1.2.6/conf/:

javawriter.bootoptions=-Xmx512m-Xms32m -Djava.class.path=ggjava/ggjava.jar

5、启动ogg

./ggsci

GGSCI(hbase)2>editparamsmgr

Port 7809

DynamicPortList 20100-20199

PurgeOldExtracts ./dirdat/\*,UseCheckPoints, MinKeepHours 2

Autostart Replicat R\*

AUTORESTART Replicat \*, WaitMinutes 1,Retries 3

ACCESSRULE, PROG \*, IPADDR192.168.107.\*, ALLOW

\#配置复制进程

GGSCI(hbase)5>editparam rinta

replicat rinta

TARGETDB LIBFILE libggjava.so SETproperty=dirprm/hbase.props

REPORTCOUNT EVERY 1 MINUTES, RATE

GROUPTRANSOPS 10000

MAP OGG.\*, TARGET root.\*;

添加进程

add extract pinta，exttrailsource ./dirdat/in

6、配置完成，启动源端和目标端的进程。

发表评论取消回复

表情：

评论列表（有 0 条评论，153人围观）

还没有评论，来说两句吧...

相关阅读

相关【HBase-Coprocessor】HBase协处理器同步数据至Elasticsearch

【HBase-Coprocessor】HBase协处理器同步数据至Elasticsearch 1）代码编写 1.1.Pom依赖导入 1.2

Myth丶恋晨/ 2023年10月08日 18:13/ 0 赞/ 40 阅读

相关 Oracle GoldenGate 将 SQLServer 数据实时同步到 ORACLE

转载：[https://blog.csdn.net/kk185800961/article/details/53426348][https_blog.csdn.net_kk18

╰+攻爆jí腚メ/ 2023年07月20日 13:47/ 0 赞/ 21 阅读

相关 Oracle 数据同步至 Elasticsreach

数据同步使用的是：logstash 官方文档： [https://www.elastic.co/guide/en/logstash/7.6/plugins-inputs-j

红太狼/ 2023年02月16日 02:00/ 0 赞/ 15 阅读

相关 goldengate mysql to oracle,GoldenGate--filetoreplicat初始化Oracle数据到MySQL

![5268f80b9b1e01f982625ef6fac83ca1.png][] 将oracle的数据初始化到mysql，使用oracle to mysl 工具将oracl

悠悠/ 2023年01月19日 07:29/ 0 赞/ 19 阅读

相关 oracle goldengate 端口,Oracle Goldengate 安装配置

首先要下载ogg的安装包。下载地址如下将安装包上传至服务器解压压缩包\[oracle@localhost app\]$ mkdir /u01/app/ogg \[or

我不是女神ヾ/ 2023年01月18日 15:29/ 0 赞/ 31 阅读

相关 ogg hbase oracle版本,Oracle GoldenGate 同步数据至Hbase

该方法没试过，先记下再说 1、软件版本说明： Goldengate 12c 12.2.0.1 for Oracle(源端) Goldengate 12c 12.3.0.1

末蓝、/ 2023年01月18日 04:29/ 0 赞/ 154 阅读

相关 OGG for oracle 安装,Oracle GOLDENGATE OGG for SQL Server 安装配置步骤

Oracle GOLDENGATE OGG for SQL Server 安装配置步骤 1. 源端软件安装 a) 必须使用具备administ

不念不忘少年蓝@/ 2023年01月18日 02:27/ 0 赞/ 364 阅读

相关使用Oracle GoldenGate 同步Oracle数据到KAFKA

OGG oracle golden gate（OGG）是可以实时捕获oracle数据库的数据变动日志并将其同步到目标端的中间件。包括安装及配置过程。 Oracle配置

叁歲伎倆/ 2022年12月14日 13:52/ 0 赞/ 179 阅读

相关使用Datax同步mysql,oracle,sqlserver数据到Hbase

文章目录 1，Datax下载使用下载二进制包使用 2，关系型数据库，导入到Hbase a，配置参考 b，具体json参

喜欢ヅ旅行/ 2022年11月26日 08:54/ 0 赞/ 707 阅读

相关 ogg 异步同步，mysql to oracle

今天遇到一个朋友需要做一个mysql到oralce 的ogg同步测试，正好利用他的环境测试了一下myql到oracle表的数据同步。下面给出测试的环境 mysql:5.7

桃扇骨/ 2022年08月31日 06:59/ 0 赞/ 234 阅读