【MySQL】Tokudb安裝測試初探

楊奇龍發表於2016-08-23
一 前言
   TokuDB 是一個高效能、支援MVCC的MySQL 和 MariaDB 的儲存引擎。TokuDB 的主要特點是資料壓縮功能出色,對高寫壓力的支援,由美國TokuTek公司() 研發,該公司於2015年4月份被Percona收購,理所當然地提供了TokuDB版本的Percona Server。本文使用Peronca server 5.6.30 版本進行測試安裝。
二 安裝前的準備
    請參考官方文件 ,
三 安裝步驟
3.1 關閉系統的大頁
  1. echo never > /sys/kernel/mm/transparent_hugepage/enabled
  2. echo never > /sys/kernel/mm/transparent_hugepage/defrag
  3. echo never > /sys/kernel/mm/redhat_transparent_hugepage/enabled
  4. echo never > /sys/kernel/mm/redhat_transparent_hugepage/defrag
3.2 禁用SELINUX
  1. root@rac2:~# >vim /etc/selinux/config 設定SELINUX=disabled
  2. root@rac2:~# >setenforce 0
  3. root@rac2:~# >getenforce
3.3 利用percona 的yum 源進行安裝
  1. yum install http://www.percona.com/downloads/percona-release/redhat/0.1-3/percona-release-0.1-3.noarch.rpm
  2. yum list | grep percona #檢查yum源裡面是否有 tokudb相關的rpm包
  3. yum install Percona-Server-tokudb-56.x86_64 -y
3.4 初始化資料庫例項並啟動資料庫
  1. /usr/bin/mysql_install_db --user=mysql --datadir=/srv/my3306/data --basedir=/usr/ --defaults-file=/srv/my3306/my.cnf &
  2. /usr/bin/mysqld_safe --defaults-file=/srv/my3306/my.cnf --user=mysql &
3.5 使用ps_tokudb_admin安裝tokudb 儲存引擎 ,記得例項必須是啟動狀態的。
  1. root@rac2:/srv/my3306/data# >ps_tokudb_admin --enable -uroot -h127.0.0.1 -P 3306
  2. Checking SELinux status...
  3. INFO: SELinux is in permissive mode.
  4. Checking if Percona Server is running with jemalloc enabled...
  5. INFO: Percona Server is running with jemalloc enabled.
  6. Checking transparent huge pages status on the system...
  7. INFO: Transparent huge pages are currently disabled on the system.
  8. Checking if thp-setting=never option is already set in config file...
  9. INFO: Option thp-setting=never is not set in the config file.
  10.       (needed only if THP is not disabled permanently on the system)
  11. Checking TokuDB engine plugin status...
  12. INFO: TokuDB engine plugin is not installed.
  13. Adding thp-setting=never option into /etc/my.cnf
  14. INFO: Successfully added thp-setting=never option into /etc/my.cnf
  15. Installing TokuDB engine...
  16. INFO: Successfully installed TokuDB engine plugin. --> 說明Tokudb 儲存引擎外掛安裝成功
3.6 登陸例項進行檢查
  1. root@rac2:/srv/my3306/data# >my 3306
  2. Server version: 5.6.31-77.0-log Percona Server (GPL), Release 77.0, Revision 5c1061c
  3. mysql> show engines;
  4. +---------+---------+--------------------------------------------------------------+--------------+------+------------+
  5. | Engine | Support | Comment | Transactions | XA | Savepoints
  6. +---------+---------+--------------------------------------------------------------+--------------+------+------------+
  7. | TokuDB | YES | Percona TokuDB Storage Engine with Fractal Tree(tm) Technology| YES | YES | YES |
  8. +---------+---------+---------------------------------------------------------------+-------------+------+------------+
  9. 10 rows in set (0.02 sec)
  10. mysql> SELECT @@tokudb_version;
  11. +------------------+
  12. | @@tokudb_version |
  13. +------------------+
  14. | 5.6.31-77.0 |
  15. +------------------+
  16. 1 row in set (0.00 sec)
四 測試
4.1 壓縮比例
 
建立innodb 和tokudb儲存引擎的表,測試插入 和檔案大小。
  1. mysql> create table t_tokudb (id int,val varchar(256)) engine=tokudb default charset utf8;
  2. Query OK, 0 rows affected (0.05 sec)
  3. mysql> insert into t_tokudb(val) select val from t_tokudb;
  4. Query OK, 262144 rows affected (2.32 sec)
  5. Records: 262144 Duplicates: 0 Warnings: 0
  6. mysql> CREATE TABLE `t_innodb` (
  7.     -> `id` int(11) DEFAULT NULL,
  8.     -> `val` varchar(256) DEFAULT NULL
  9.     -> ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
  10. Query OK, 0 rows affected (0.13 sec)
  11. mysql> insert into t_innodb select * from t_tokudb;
  12. Query OK, 1048576 rows affected (10.40 sec)
  13. Records: 1048576 Duplicates: 0 Warnings: 0
檢視innodb 表和tokudb 表的大小
root@rac2:/srv/my3306/data# >du -sm _yang_t_tokudb_main_5_2_1d.tokudb
8 _yang_t_tokudb_main_5_2_1d.tokudb
root@rac2:/srv/my3306/data/yang# >du -sm t_innodb.ibd
149 t_innodb.ibd
root@rac2:/srv/my3306/data/yang# >
innodb 149M
tokudb 8M
壓縮比達到驚人的 149/8 = 18:1. 因為測試例子中val 的值都是相同的,生產環境中val值不相同的會比較多,壓縮比會有所減小。
4.2  儲存引擎轉換
  1. mysql> show create table t1 \G
  2. *************************** 1. row ***************************
  3.        Table: t1
  4. Create Table: CREATE TABLE `t1` (
  5.   `id` int(10) NOT NULL AUTO_INCREMENT,
  6.   `val` varchar(10) DEFAULT NULL,
  7.   PRIMARY KEY (`id`)
  8. ) ENGINE=InnoDB AUTO_INCREMENT=5 DEFAULT CHARSET=utf8
  9. 1 row in set (0.01 sec)

  10. mysql> alter table t1 engine=tokudb;
  11. Query OK, 4 rows affected (0.25 sec)
  12. Records: 4 Duplicates: 0 Warnings: 0
4.3 online ddl 測試
  1. mysql> alter table t_tokudb add name varchar(30) default 'a';
  2. Query OK, 0 rows affected (0.06 sec)
  3. Records: 0 Duplicates: 0 Warnings: 0
  4. mysql> alter table t_tokudb add key idx_a(name);
    Query OK, 0 rows affected (4.79 sec)
    Records: 0  Duplicates: 0  Warnings: 0
  5. mysql> alter table t_tokudb drop key idx_a;
    Query OK, 0 rows affected (0.57 sec)
    Records: 0  Duplicates: 0  Warnings: 0
五  TokuDB 總結
TokuDB特點
1 高壓縮比,預設使用zlib進行壓縮,尤其是對字串(varchar,text等)型別有非常高的壓縮比,比較適合儲存日誌、原始資料等。一般有5-10倍壓縮比。
2 支援線上欄位增加、刪除、擴充套件、重新命名操作。
3 支援完整的ACID特性和事務機制
4 支援快速的寫入場景,Fractal-tree在事務實現上有優勢,無undo log
TokuDB缺點
1,響應時間相對較長
2,online ddl 對text,blob等型別的欄位不適用
3,沒有完善的熱備工具,目前有阿里雲資料庫團隊推薦的備份方案和邏輯備份
建議適用場景:
1 訪問頻率不高的資料或歷史資料歸檔
2 表非常大並且時不時還需要進行ddl操作
TokuDB的壓縮演算法如何選擇
tokudb_zlib:表啟用zlib壓縮,壓縮效果偏中,CPU消耗偏中,建議使用(預設);
tokudb_quicklz:表啟用quicklz壓縮,壓縮效果差,CPU消耗低;
tokudb_lzma:表啟用lzma壓縮,壓縮效果好,CPU消耗高。
TokuDB預設壓縮演算法為zlib,建議您不要做修改,因為zlib壓縮的價效比非常高。

六 參考資料
[1] 
[2]
[3] [4]

來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/22664653/viewspace-2123829/,如需轉載,請註明出處,否則將追究法律責任。

相關文章