goldengate的datapump調優
Excessive LAG on OGG extract Data Pump Sending Data Over WAN, calculate TCP TCPBUFSIZE TCPFLUSHBYTES [ID 1071892.1]
Version 10.4.0.12 and later
症狀:
datapump程式嚴重lag,並未達到預期的網路吞吐量
誘因:
OGG的tcpbufsize預設30000位元組,對繁忙網路設定過小;
系統沒有啟用tcp window scale;
系統的socket buffer過小;
診斷:
先透過ping檢視RTT,並計算實際吞吐量;
開啟tcp window scale;
提升socket buffer;
$ ping -s target 56 4
PING target: 56 data bytes
64 bytes from target.mydomain.com (10.221.65.15): icmp_seq=0. time=39. ms
64 bytes from target.mydomain.com (10.221.65.15): icmp_seq=1. time=39. ms
64 bytes from target.mydomain.com (10.221.65.15): icmp_seq=2. time=39. ms
64 bytes from target.mydomain.com (10.221.65.15): icmp_seq=3. time=39. ms
----redsap58 PING Statistics----
4 packets transmitted, 4 packets received, 0% packet loss
round-trip (ms) min/avg/max = 39/39/39
由上可得rtt=39ms,假定頻寬為155Mbps,網路吞吐量=min(155M,socket_buffer/rtt),則socket_buffer=155M*rtt/8=755625 bytes
將tcpbufsize/tcpflushbytes設定為755625
RMTHOST target, MGRPORT 7809, TCPBUFSIZE 755625, TCPFLUSHBYTES 755625;
開啟tcp scale window;
增大socket buffer
net.core.rmem_max
net.core.wmem_max
net.ipv4.tcp_rmem
net.ipv4.tcp_wmem
net.ipv4.tcp_window_scaling
具體可參照
http://space.itpub.net/15480802/viewspace-757720
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/15480802/viewspace-760890/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- goldengate的extract程式調優Go
- 【Spark篇】---Spark調優之程式碼調優,資料本地化調優,記憶體調優,SparkShuffle調優,Executor的堆外記憶體調優Spark記憶體
- 【DATAPUMP】使用DataPump遷移Oracle資料庫Oracle資料庫
- Spark 效能調優--資源調優Spark
- JVM調優總結-調優方法JVM
- Spark 效能調優--Shuffle調優 SortShuffleManagerSpark
- about datapump parallelParallel
- Speedup Datapump ImportImport
- oracle的調優(轉)Oracle
- Spark的效能調優Spark
- datapump跨平臺升級遷移的對比測試和優化優化
- 調優 | Apache Hudi應用調優指南Apache
- JVM調優總結(十)-調優方法JVM
- MySQL調優篇 | SQL調優實戰(5)MySql
- 效能調優學習之硬體調優
- datapump簡介(一)
- Oracle DataPump之二Oracle
- Oracle DataPump之一Oracle
- Oracle Datapump 學習Oracle
- "簡單"的jvm調優JVM
- “簡單”的jvm調優JVM
- SparkSQL 調優SparkSQL
- php調優PHP
- 模型調優模型
- JVM調優JVM
- MySQL調優MySql
- SQL調優SQL
- 數倉調優實戰:GUC引數調優
- MindSpore模型精度調優實戰:常用的定位精度除錯調優思路模型除錯
- 如何提高datapump操作效能
- 外部表筆記-datapump筆記
- ORACLE_DATAPUMP & External TableOracle
- 【效能調優】效能測試、分析與調優基礎
- JVM調優工具Arthas的使用JVM
- Nginx的優化調整方面Nginx優化
- Oracle 星型模式的調優Oracle模式
- MongoDB的效能調優工具 -- DexMongoDB
- 一條大sql的調優SQL