使用PHP驅動的MongoDB的單點查詢效能測試

小橋河西發表於2015-05-15
PHPMongoDB

之前的測試，發現MongoDB的插入操作在使用PHP驅動時比使用mongo控制檯更快。測試發現查詢也是類似的情況（以下測試都使用WT引擎）。
http://blog.chinaunix.net/uid-20726500-id-4998173.html

1. 插入資料

點選(此處)摺疊或開啟

  1. –bash–4.1$ cat test.php
  2. ?php
  3. header(“Content-Type:text/html;charset=utf-8”);
  4. //MongoDB有使用者名稱密碼並指定資料庫admin
  5. $conn = new Mongo(“mongodb://127.0.0.1:27017/benchmark”);
  6.   
  7. $db = $conn–>admin;
  8. //定製結果集(表名things)
  9. $collection = $db–>members;
  10. //$time1 = xdebug_time_index();
  12. for($i=1;$i1000000;$i++){
  13. $user = array(`uname` => `chuchuchu_`.$i, `name` => `褚褚褚`, `password` => `e10adc3949ba59abbe56e057f20f883e`, `email` => `dhaig@yahoo.com.cn`);
  14. $collection–>insert($user);
  15. }
  17. $conn–>close();
  18. //$time2 = xdebug_time_index();
  19. //echo “MongoDB響應時間為：”.($time2-$time1).”秒”;
  20. ?>
  22. –bash–4.1$ time php test.php
  23.  
  25. real    1m45.062s
  26. user    0m22.609s
  27. sys    0m12.569s

2. 建索引

點選(此處)摺疊或開啟

  1. –bash–4.1$ mongo benchmark
  2. ...
  3. > use admin
  4. switched to db admin
  5. > db.members.ensureIndex({uname:1})
  6. {
  7.     “createdCollectionAutomatically” : false,
  8.     “numIndexesBefore” : 1,
  9.     “numIndexesAfter” : 2,
  10.     “ok” : 1
  11. }

3.單點索引查詢

點選(此處)摺疊或開啟

  1. –bash–4.1$ cat test_sel.php
  2. ?php
  3. header(“Content-Type:text/html;charset=utf-8”);
  4. $conn = new Mongo(“mongodb://127.0.0.1:27017/benchmark”);
  6. $db = $conn–>admin;
  7. $collection = $db–>members;
  9. for($i=1;$i1000000;$i++){
  10. $query = array( `uname` => `chuchuchu_`.$i);
  11. $cursor = $collection–>find( $query );
  12. while( $cursor–>hasNext() ) {
  13.     $var=$cursor–>getNext();
  14. }
  15. }
  17. $conn–>close();
  19. ?>
  21. –bash–4.1$ time php test_sel.php
  23. real    1m42.998s
  24. user    0m22.888s
  25. sys    0m13.160s

top的結果

點選(此處)摺疊或開啟

  1. [root@hanode1 ~]# top
  2. top – 03:27:45 up 8 days, 8:04, 6 users, load average: 0.35, 0.35, 0.17
  3. Tasks: 152 total, 1 running, 151 sleeping, 0 stopped, 0 zombie
  4. Cpu(s): 18.7%us, 5.2%sy, 0.0%ni, 74.2%id, 0.0%wa, 0.0%hi, 2.0%si, 0.0%st
  5. Mem: 1019320k total, 952192k used, 67128k free, 155224k buffers
  6. Swap: 2064376k total, 184k used, 2064192k free, 332756k cached
  8. PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND
  9. 24809 postgres 20 0 575m 294m 11m S 65.2 29.6 3:23.02 mongod
  10. 28124 postgres 20 0 208m 7016 4528 S 34.9 0.7 0:02.05 php

索引查詢速度大約每秒1w次，mongod消耗CPU 65.2%，經過計算將1個cpu core用滿可以達到1.5w/s（1/0.652）。

4. 一級索引的測試

上面是二級索引的測試，那麼”_id”的一級索引，效能會不會還有提升空間呢？也測一下看看。

4.1 先把之前是資料刪掉。

點選(此處)摺疊或開啟

  1. -bash-4.1$ mongo benchmark
  2. …
  3. > use admin
  4. switched to db admin
  5. > db.members.drop()
  6. true

4.2 插入資料

點選(此處)摺疊或開啟

  1. –bash–4.1$ cat test_2.php
  2. ?php
  3. header(“Content-Type:text/html;charset=utf-8”);
  4. //MongoDB有使用者名稱密碼並指定資料庫admin
  5. $conn = new Mongo(“mongodb://127.0.0.1:27017/benchmark”);
  6.   
  7. $db = $conn–>admin;
  8. //定製結果集(表名things)
  9. $collection = $db–>members;
  10. //$time1 = xdebug_time_index();
  12. for($i=1;$i1000000;$i++){
  13. $user = array(`_id` => `chuchuchu_`.$i, `name` => `褚褚褚`, `password` => `e10adc3949ba59abbe56e057f20f883e`, `email` => `dhaig@yahoo.com.cn`);
  14. $collection–>insert($user);
  15. }
  17. $conn–>close();
  18. //$time2 = xdebug_time_index();
  19. //echo “MongoDB響應時間為：”.($time2-$time1).”秒”;
  20. ?>
  22. –bash–4.1$ time php test_2.php
  23.  
  25. real    1m43.274s
  26. user    0m21.286s
  27. sys    0m12.985s

原來test.php中的`uname`被改成了`_id`

4.3 查詢資料

點選(此處)摺疊或開啟

  1. –bash–4.1$ cat test_sel_2.php
  2. ?php
  3. header(“Content-Type:text/html;charset=utf-8”);
  4. $conn = new Mongo(“mongodb://127.0.0.1:27017/benchmark”);
  6. $db = $conn–>admin;
  7. $collection = $db–>members;
  9. for($i=1;$i1000000;$i++){
  10. $query = array( `_id` => `chuchuchu_`.$i);
  11. $cursor = $collection–>find( $query );
  12. while( $cursor–>hasNext() ) {
  13.     $var=$cursor–>getNext();
  14. }
  15. }
  17. $conn–>close();
  19. ?>
  21. –bash–4.1$ time php test_sel_2.php
  23. real    1m19.557s
  24. user    0m21.236s
  25. sys    0m12.156s

原來test_sel.php中的`uname`被改成了`_id`

查詢top結果

點選(此處)摺疊或開啟

  1. [root@hanode1 ~]# top
  2. top – 03:40:51 up 8 days, 8:17, 6 users, load average: 0.21, 0.37, 0.28
  3. Tasks: 152 total, 2 running, 150 sleeping, 0 stopped, 0 zombie
  4. Cpu(s): 17.5%us, 5.5%sy, 0.0%ni, 74.9%id, 0.0%wa, 0.0%hi, 2.1%si, 0.0%st
  5. Mem: 1019320k total, 787364k used, 231956k free, 83380k buffers
  6. Swap: 2064376k total, 184k used, 2064192k free, 142384k cached
  8. PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND
  9. 24809 postgres 20 0 711m 420m 11m R 58.2 42.2 6:02.83 mongod
  10. 29480 postgres 20 0 208m 7016 4528 S 41.6 0.7 0:02.78 php

索引查詢速度大約每秒1.26w次，mongod消耗CPU 58.2% ，經過計算將1個cpu core用滿可以達到2.2w/s（1/0.582）。

5. 總結

在我的測試環境下，假設mongod 用滿1個CPU core，一級索引的單點查詢QPS可達到2.2w/s，二級索引則大約是1.5w/s。


相關文章