前言
Docker最近幾年異常火爆，主要是因為其方便、快捷、輕量，相對於VM，它不需要佔用太多資源，隨時可以建立、刪除，或在已有image上新增一些軟體，再製作成另一個模板image供日後使用。Docker提供的Hub或private registry功能，也極大的方便了日常測試環境的配置和使用，類似於手機應用商店，可以按需下載，幫助企業在很短的時候內部署多個不同的DB環境，如Windows, Unbuntu, MySQL, Postgresql, Hive等，跟傳統的VM相比，佔用資源更少，效率也更高。
針對軟體開發、測試和釋出，Docker在DevOps更是如魚得水，將持續整合和測試提升到了一個新的高度。不過，今天主要介紹GoldenGate在Docker環境下的使用和心得。
GoldenGate主要用於關係型資料庫的增量資料捕獲和實時投遞，支援Oracle, MySQL, SQLServer, DB2, Sybase, Big data等。通過將GoldenGate製作成Docker Image，可以很容易的搭建一套捕獲增量資料的測試環境，同時，也可以在企業內部實現快速的GoldenGate部署。
本次測試主要有三套Docker環境
l Oracle DB on Docker
l OGG on Docker with Oracle Instant client and OGG for mysql
l MySQL on Docker
下面測試以Oracle DB為源資料庫，使用OGG遠端抽取增量資料，再將增量資料投遞到MySQL中。架構如下：
Docker環境準備
Oracle on docker準備
針對Oracle DB on docker，可以從store.docker.com上下載，也可以自己在一個Oracle Linux容器中安裝oracle db，從省事的角度，我們直接從docker hub上面pull即可，不過需要先在docker網站建立賬號，然後才能下載oracle db image
docker login
docker pull store/oracle/database-enterprise:12.2.0.1
由於當前是oracle db 12.2版本，因此，OGG for oracle只能使用12.3版本。
Mysql on docker準備
直接下載官方的image即可。
docker pull mysql
OGG on docker準備
GoldenGate Image沒有現成的，所以還需要我們手工生成。本次測試主要是為了展現docker的可重用性，因此，我們在一個image中部署有ogg for oracle和ogg for mysql。
由於ogg for oracle需要有OCI才能正常執行，所以我們可以直接使用docker oracle instant client image，在此基礎上再安裝ogg for oracle和ogg for mysql。
先準備oracle instance client image
docker pull store/oracle/database-instantclient:12.2.0.1
基於此image再建立一個包含ogg for oracle及ogg for mysql的image，需要先將安裝好的ogg目錄打包，再新增到docker中。
Dockerfile內容如下：
FROM container-registry.oracle.com/database/instantclient:12.2.0.1 ENV OGG_HOME=/u01/ogg123 ENV ORACLE_HOME=/lib/oracle/12.2/client64 ENV LD_LIBRARY_PATH=/lib/oracle/12.2/client64/lib ENV TNS_ADMIN=/u01/tns RUN mkdir /u01/tns/ ADD tnsnames.ora /u01/tns/ ADD ogg123.tar /u01/ ADD ggmysql.tar /u01/ EXPOSE 7809 7909 CMD ["/bin/bash"] |
其中tnsnames.ora用於在ogg docker中訪問oracle db，內容如下：
其中172.17.0.3是oracle db docker的IP地址。
ORCLCDB=(DESCRIPTION=(ADDRESS=(PROTOCOL=TCP)(HOST=172.17.0.3)(PORT=1521)) (CONNECT_DATA=(SERVER=DEDICATED)(SERVICE_NAME=ORCLCDB.localdomain))) ORCLPDB1=(DESCRIPTION=(ADDRESS=(PROTOCOL=TCP)(HOST=172.17.0.3)(PORT=1521)) (CONNECT_DATA=(SERVER=DEDICATED)(SERVICE_NAME=ORCLPDB1.localdomain))) |
建立ogg image
docker build -t="ogg123mysql122" .
測試
下載的oracle db image預設是未開啟歸檔的，所以需要根據OGG的配置要求，在oracle db上開啟歸檔及設定其它引數，此處涉及到OGG的相關配置，在此略過。
啟動源端db on docker
docker run -d -it --name orcl –p 11521:1521 store/oracle/database-enterprise:12.2.0.1
#由於啟動DB需要花一定時間，等container執行正常之後，再連線到DB
docker exec -it orcl bash -c "source /home/oracle/.bashrc; sqlplus / as sysdba"
檢視一下DB的相關資訊
SQL> select instance_name from v$instance;
INSTANCE_NAME
----------------
ORCLCDB
SQL> show pdbs;
CON_ID CON_NAME OPEN MODE RESTRICTED
---------- ------------------------------ ---------- ----------
2 PDB$SEED READ ONLY NO
3 ORCLPDB1 READ WRITE NO
SQL>
切換到pdb上，檢視我們的此次用到的測試表
啟動目標端DB
啟動mysql docker
docker run –ti –p 13306:3306 mysql /bin/bash
然後在內容中執行如下命令
#service mysql start
#mysql –u root
檢視目標端的測試表
啟動OGG image並測試
根據前面建立的ogg image，執行並進入shell
docker run –ti --name oggdocker ogg123mysql122 /bin/bash
源端OGG for oracle
進入源端的ggsci，檢視抽取程式引數及執行狀態
可以從OGG docker順利登入到另一個docker內的oracle 源資料庫。
在源端DB插入測試資料，檢查OGG的捕獲程式情況。
OGG可以正常捕獲資料。
目標端ogg for mysql
投遞程式引數檔案，通過docker內部IP，可正常登入到mysql.
可以看到，資料可以正常投遞到mysql中。
以下是資料庫中的實際資料。
結論
可以看到，在具備ogg docker image的情況下，如果要部署一套實時的資料複製鏈路，只需要將docker run起來，通過簡單的引數配置即可。採用OGG+docker的架構，可以很快的提供資料複製測試和生產部署，同時，在大資料整合環境中，也可以很容易的部署多個投遞點，而不用擔心版本不一致。