sqlldr效能調優測試
http://blog.itpub.net/23718752/viewspace-1182534/
今天客戶IT的同事把網路做了調整,他們就想看看到底改進有多大。
下面是測試的一些記錄。
àoriginal logs for issue table, loading around 6 hours.
Total logical records skipped: 0
Total logical records read: 4096786
Total logical records rejected: 0
Total logical records discarded: 0
Run began on Wed Jun 11 08:52:55 2014
Run ended on Wed Jun 11 14:57:40 2014
Elapsed time was: 06:04:44.05
CPU time was: 00:00:38.18
àafter network enhanced, loading time has reduced to around 4 mins.
Total logical records skipped: 0
Total logical records read: 4096786
Total logical records rejected: 0
Total logical records discarded: 0
Run began on Mon Jun 16 12:58:01 2014
Run ended on Mon Jun 16 13:02:15 2014
Elapsed time was: 00:04:13.28
CPU time was: 00:00:30.00
àconsidering impact from index, I loaded data again, keep table structure,index exactly the same.
Total logical records skipped: 0
Total logical records read: 4096786
Total logical records rejected: 0
Total logical records discarded: 0
Run began on Mon Jun 16 13:09:34 2014
Run ended on Mon Jun 16 13:16:37 2014
Elapsed time was: 00:07:02.61
CPU time was: 00:00:31.23
àtune sqlldr command with below options, keep table structure,index exactly the same.
parallel=true bindsize=7500000 readsize=7500000 streamsize=7500000 rows=50000
Total logical records skipped: 0
Total logical records read: 4096786
Total logical records rejected: 0
Total logical records discarded: 0
Run began on Mon Jun 16 13:21:13 2014
Run ended on Mon Jun 16 13:24:19 2014
Elapsed time was: 00:03:05.75
CPU time was: 00:00:41.27
所以綜上所述,在排查了cpu,io,快取,網路的因素後,還可以使用一些選項來最佳化sqlldr,在某種程度上得到提升。
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/23718752/viewspace-1183863/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- 【效能調優】效能測試、分析與調優基礎
- 效能測試瓶頸調優
- 效能測試之測試分析與調優
- Oracle sqlldr工具功能測試OracleSQL
- 效能測試調優應該注意哪些要點,一般效能測試調優的步驟-Alltesting|澤眾雲測試
- 一次效能測試調優總結
- 你不知道的JavaScript——效能測試和調優JavaScript
- 效能測試瓶頸之CPU問題分析與調優
- 效能測試公開課來啦!從效能測試方案到效能調優,從負載均衡到中介軟體測試,全方位講解效能測試核心內容負載
- 效能測試實踐 | PerfDog 助力微信小遊戲 / 小程式效能調優遊戲
- 效能測試實踐 | PerfDog助力微信小遊戲/小程式效能調優遊戲
- 《軟體效能測試、分析與調優實踐之路》簡介
- 軟體效能測試分析與調優實踐之路-Java應用程式的效能分析與調優-手稿節選Java
- 為資料庫效能調優插上 AI 的翅膀 | 調優測試框架 Matrix 團隊訪談資料庫AI框架
- 【學習效能分析--第二版】如何做好效能測試分析診斷調優-暨《軟體效能測試、分析與調優實踐之路》(第2版)推薦
- 《軟體效能測試分析與調優實踐之路》(第2版) 讀書筆記(二)總體介紹(下)-真正從效能分析與調優來看效能測試筆記
- 《軟體效能測試分析與調優實踐之路》(第2版) 讀書筆記(一)總體介紹(上)-真正從效能分析與調優來看效能測試筆記
- 【效能測試策略】系統調優由易到難的順序
- 蘇寧易購億萬規模效能測試實踐之 SQL 效能調優 - 楊婧SQL
- Spark 效能調優--資源調優Spark
- ElasticSearch效能調優Elasticsearch
- adnroid效能調優
- 軟體效能測試的優勢
- 阿里面試100%問到,JVM效能調優篇阿里面試JVM
- 效能調優學習之硬體調優
- 效能調優實戰
- Linux之效能調優Linux
- 效能監控調優
- linux調優效能命令Linux
- .Net效能調優-ArrayPool
- .Net效能調優-MemoryPool
- 一次效能壓測及分析調優實踐
- TiDB 效能分析&效能調優&優化實踐大全TiDB優化
- Nginx安全優化與效能調優Nginx優化
- 《軟體效能測試、分析與調優實踐之路》(第2版) PPT課件流出
- Spark效能調優-RDD運算元調優篇(深度好文,面試常問,建議收藏)Spark面試
- solr研磨之效能調優Solr
- Kafka 線上效能調優Kafka
- 2. 效能調優概述