Oracle GoldenGate for Big Data 12.2.0.1的新特性

margiex發表於2015-12-27
ogg for bigdata 12.2已經發布,新增有如下特性:
支援java replicat程式
OGG12.2中開發了基於java的replicat模式,以前的版本是基於extract程式中使用userexit實現資料投遞,而在12.2中,直接支援replicat程式,效能更好,可以使用宣告式的對映、基於操作記錄數或資料大小進行交易分組,可使用replicat程式中支援的引數,並改善了檢查點功能。

支援kafak
ogg 12.2中,可直接將LCR(邏輯變更記錄)實時寫入到kafka主題,可以處理insert/update/delete和主鍵更新操作。也可以提供gzip或snappy以提升效能。

動態資料處理
OGG 12.2中不再強制要求使用def檔案,當源端表結構變化時,DDL可被自動複製到目標端。這項功能消除了defgen的繁瑣工作和表結構變化帶來的程式重啟工作。

宣告式設計
OGG for big data可以提供對映功能,將源表對映為目標端的欄位格式,如HDFS/HBase, hive, Flume and Kafka。輸出的後設資料資訊在Hive或Avro中都是有效的。此項特性可以幫助降低ETL處理的時間和資源,即通過OGG實時輸出需要的格式欄位,而不用在ETL中來處理這些工作。

可插拔的格式器
OGG for big data現在支援將text, xml, json, avro或自定義格式輸出到所有支援的大資料平臺,這項特性可以為ETL處理不同格式節約資源和時間。

安全支援
ogg 12.2現在支援hadoop中kerbose認證,可輸入kerbose identity和username引數,實現hadoop的安全

相關文章