【MySQL】Tokudb安裝測試初探
一 前言
TokuDB 是一個高效能、支援MVCC的MySQL 和 MariaDB 的儲存引擎。TokuDB 的主要特點是資料壓縮功能出色,對高寫壓力的支援,由美國TokuTek公司() 研發,該公司於2015年4月份被Percona收購,理所當然地提供了TokuDB版本的Percona Server。本文使用Peronca server 5.6.30 版本進行測試安裝。
二 安裝前的準備
請參考官方文件 ,
三 安裝步驟
3.1 關閉系統的大頁
3.2 禁用SELINUX
3.3 利用percona 的yum 源進行安裝
3.4 初始化資料庫例項並啟動資料庫
3.5 使用ps_tokudb_admin安裝tokudb 儲存引擎 ,記得例項必須是啟動狀態的。
3.6 登陸例項進行檢查
四 測試
4.1 壓縮比例
建立innodb 和tokudb儲存引擎的表,測試插入 和檔案大小。
檢視innodb 表和tokudb 表的大小
root@rac2:/srv/my3306/data# >du -sm _yang_t_tokudb_main_5_2_1d.tokudb
8 _yang_t_tokudb_main_5_2_1d.tokudb
root@rac2:/srv/my3306/data/yang# >du -sm t_innodb.ibd
149 t_innodb.ibd
root@rac2:/srv/my3306/data/yang# >
innodb 149M
tokudb 8M
壓縮比達到驚人的 149/8 = 18:1. 因為測試例子中val 的值都是相同的,生產環境中val值不相同的會比較多,壓縮比會有所減小。
4.2 儲存引擎轉換
4.3 online ddl 測試
五 TokuDB 總結
TokuDB特點
1 高壓縮比,預設使用zlib進行壓縮,尤其是對字串(varchar,text等)型別有非常高的壓縮比,比較適合儲存日誌、原始資料等。一般有5-10倍壓縮比。
2 支援線上欄位增加、刪除、擴充套件、重新命名操作。
3 支援完整的ACID特性和事務機制
4 支援快速的寫入場景,Fractal-tree在事務實現上有優勢,無undo log
TokuDB缺點
1,響應時間相對較長
2,online ddl 對text,blob等型別的欄位不適用
3,沒有完善的熱備工具,目前有阿里雲資料庫團隊推薦的備份方案和邏輯備份
建議適用場景:
1 訪問頻率不高的資料或歷史資料歸檔
2 表非常大並且時不時還需要進行ddl操作
TokuDB的壓縮演算法如何選擇
tokudb_zlib:表啟用zlib壓縮,壓縮效果偏中,CPU消耗偏中,建議使用(預設);
tokudb_quicklz:表啟用quicklz壓縮,壓縮效果差,CPU消耗低;
tokudb_lzma:表啟用lzma壓縮,壓縮效果好,CPU消耗高。
TokuDB預設壓縮演算法為zlib,建議您不要做修改,因為zlib壓縮的價效比非常高。
六 參考資料
[1]
[2]
[3] [4]
TokuDB 是一個高效能、支援MVCC的MySQL 和 MariaDB 的儲存引擎。TokuDB 的主要特點是資料壓縮功能出色,對高寫壓力的支援,由美國TokuTek公司() 研發,該公司於2015年4月份被Percona收購,理所當然地提供了TokuDB版本的Percona Server。本文使用Peronca server 5.6.30 版本進行測試安裝。
二 安裝前的準備
請參考官方文件 ,
三 安裝步驟
3.1 關閉系統的大頁
-
echo never > /sys/kernel/mm/transparent_hugepage/enabled
-
echo never > /sys/kernel/mm/transparent_hugepage/defrag
-
echo never > /sys/kernel/mm/redhat_transparent_hugepage/enabled
- echo never > /sys/kernel/mm/redhat_transparent_hugepage/defrag
-
root@rac2:~# >vim /etc/selinux/config 設定SELINUX=disabled
-
root@rac2:~# >setenforce 0
- root@rac2:~# >getenforce
-
yum install http://www.percona.com/downloads/percona-release/redhat/0.1-3/percona-release-0.1-3.noarch.rpm
-
yum list | grep percona #檢查yum源裡面是否有 tokudb相關的rpm包
- yum install Percona-Server-tokudb-56.x86_64 -y
-
/usr/bin/mysql_install_db --user=mysql --datadir=/srv/my3306/data --basedir=/usr/ --defaults-file=/srv/my3306/my.cnf &
- /usr/bin/mysqld_safe --defaults-file=/srv/my3306/my.cnf --user=mysql &
-
root@rac2:/srv/my3306/data# >ps_tokudb_admin --enable -uroot -h127.0.0.1 -P 3306
-
Checking SELinux status...
-
INFO: SELinux is in permissive mode.
-
Checking if Percona Server is running with jemalloc enabled...
-
INFO: Percona Server is running with jemalloc enabled.
-
Checking transparent huge pages status on the system...
-
INFO: Transparent huge pages are currently disabled on the system.
-
Checking if thp-setting=never option is already set in config file...
-
INFO: Option thp-setting=never is not set in the config file.
-
(needed only if THP is not disabled permanently on the system)
-
Checking TokuDB engine plugin status...
-
INFO: TokuDB engine plugin is not installed.
-
Adding thp-setting=never option into /etc/my.cnf
-
INFO: Successfully added thp-setting=never option into /etc/my.cnf
-
Installing TokuDB engine...
- INFO: Successfully installed TokuDB engine plugin. --> 說明Tokudb 儲存引擎外掛安裝成功
-
root@rac2:/srv/my3306/data# >my 3306
-
Server version: 5.6.31-77.0-log Percona Server (GPL), Release 77.0, Revision 5c1061c
-
mysql> show engines;
-
+---------+---------+--------------------------------------------------------------+--------------+------+------------+
-
| Engine | Support | Comment | Transactions | XA | Savepoints
-
+---------+---------+--------------------------------------------------------------+--------------+------+------------+
-
| TokuDB | YES | Percona TokuDB Storage Engine with Fractal Tree(tm) Technology| YES | YES | YES |
-
+---------+---------+---------------------------------------------------------------+-------------+------+------------+
-
10 rows in set (0.02 sec)
-
mysql> SELECT @@tokudb_version;
-
+------------------+
-
| @@tokudb_version |
-
+------------------+
-
| 5.6.31-77.0 |
-
+------------------+
- 1 row in set (0.00 sec)
4.1 壓縮比例
建立innodb 和tokudb儲存引擎的表,測試插入 和檔案大小。
-
mysql> create table t_tokudb (id int,val varchar(256)) engine=tokudb default charset utf8;
-
Query OK, 0 rows affected (0.05 sec)
-
mysql> insert into t_tokudb(val) select val from t_tokudb;
-
Query OK, 262144 rows affected (2.32 sec)
-
Records: 262144 Duplicates: 0 Warnings: 0
-
mysql> CREATE TABLE `t_innodb` (
-
-> `id` int(11) DEFAULT NULL,
-
-> `val` varchar(256) DEFAULT NULL
-
-> ) ENGINE=InnoDB DEFAULT CHARSET=utf8;
-
Query OK, 0 rows affected (0.13 sec)
-
mysql> insert into t_innodb select * from t_tokudb;
-
Query OK, 1048576 rows affected (10.40 sec)
- Records: 1048576 Duplicates: 0 Warnings: 0
root@rac2:/srv/my3306/data# >du -sm _yang_t_tokudb_main_5_2_1d.tokudb
8 _yang_t_tokudb_main_5_2_1d.tokudb
root@rac2:/srv/my3306/data/yang# >du -sm t_innodb.ibd
149 t_innodb.ibd
root@rac2:/srv/my3306/data/yang# >
innodb 149M
tokudb 8M
壓縮比達到驚人的 149/8 = 18:1. 因為測試例子中val 的值都是相同的,生產環境中val值不相同的會比較多,壓縮比會有所減小。
4.2 儲存引擎轉換
-
mysql> show create table t1 \G
-
*************************** 1. row ***************************
-
Table: t1
-
Create Table: CREATE TABLE `t1` (
-
`id` int(10) NOT NULL AUTO_INCREMENT,
-
`val` varchar(10) DEFAULT NULL,
-
PRIMARY KEY (`id`)
-
) ENGINE=InnoDB AUTO_INCREMENT=5 DEFAULT CHARSET=utf8
-
1 row in set (0.01 sec)
-
-
mysql> alter table t1 engine=tokudb;
-
Query OK, 4 rows affected (0.25 sec)
- Records: 4 Duplicates: 0 Warnings: 0
-
mysql> alter table t_tokudb add name varchar(30) default 'a';
-
Query OK, 0 rows affected (0.06 sec)
-
Records: 0 Duplicates: 0 Warnings: 0
-
mysql> alter table t_tokudb add key idx_a(name);
Query OK, 0 rows affected (4.79 sec)
Records: 0 Duplicates: 0 Warnings: 0
-
mysql> alter table t_tokudb drop key idx_a;
Query OK, 0 rows affected (0.57 sec)
Records: 0 Duplicates: 0 Warnings: 0
TokuDB特點
1 高壓縮比,預設使用zlib進行壓縮,尤其是對字串(varchar,text等)型別有非常高的壓縮比,比較適合儲存日誌、原始資料等。一般有5-10倍壓縮比。
2 支援線上欄位增加、刪除、擴充套件、重新命名操作。
3 支援完整的ACID特性和事務機制
4 支援快速的寫入場景,Fractal-tree在事務實現上有優勢,無undo log
TokuDB缺點
1,響應時間相對較長
2,online ddl 對text,blob等型別的欄位不適用
3,沒有完善的熱備工具,目前有阿里雲資料庫團隊推薦的備份方案和邏輯備份
建議適用場景:
1 訪問頻率不高的資料或歷史資料歸檔
2 表非常大並且時不時還需要進行ddl操作
TokuDB的壓縮演算法如何選擇
tokudb_zlib:表啟用zlib壓縮,壓縮效果偏中,CPU消耗偏中,建議使用(預設);
tokudb_quicklz:表啟用quicklz壓縮,壓縮效果差,CPU消耗低;
tokudb_lzma:表啟用lzma壓縮,壓縮效果好,CPU消耗高。
TokuDB預設壓縮演算法為zlib,建議您不要做修改,因為zlib壓縮的價效比非常高。
六 參考資料
[1]
[2]
[3] [4]
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/22664653/viewspace-2123829/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- TokuDB安裝
- 6.linux->MySQL 安裝及效能測試LinuxMySql
- dbdeployer 快速安裝MySQL8.0各測試環境MySql
- sqlserver 安裝測試SQLServer
- 安裝測試kafkaKafka
- 【Windows 64位】MySQL 8.0.21安裝教程+Navicat+MySQL連線測試WindowsMySql
- SSDB安裝和使用初探
- mysql之 sysbench1.0.3 安裝與系統壓力測試MySql
- app的安裝與解除安裝測試點APP
- pyflink的安裝和測試
- 效能測試 -- docker安裝influxdbDockerUX
- vue測試安裝和配置Vue
- Arthas 初探--安裝初步適用
- Web 端滲透測試初探Web
- 初探軟體測試心理學
- 軟體測試--selenium 安裝使用
- 軟體測試--selenium安裝使用
- 【GO】MAC安裝和測試GoGoMac
- SpringBoot Cli 安裝執行測試Spring Boot
- Consul初探-從安裝到執行
- 每日測試思維培養—— PC端安裝解除安裝軟體,怎麼測試,如何設計測試用例?
- 大資料測試之hadoop初探大資料Hadoop
- 前端自動化測試初探(一)前端
- 安裝mysqlMySql
- MySQL安裝MySql
- mysql 安裝MySql
- Linux安裝解除安裝MySQLLinuxMySql
- CentOS 下效能測試工具 wrk 安裝CentOS
- Jmeter下載安裝配置---測試小白JMeter
- 介面測試:postman的安裝與使用Postman
- 三十七、Flume的安裝及測試
- cloudera 5 的安裝測試步驟Cloud
- 連網安裝mysql與原始碼安裝mysqlMySql原始碼
- 【MySQL安裝】Linux下安裝MySQL(預編譯)MySqlLinux編譯
- clickhouse for centos7安裝和使用初探CentOS
- 基於LINUX的MySql二進位制本地安裝和部署實施測試LinuxMySql
- 初探免殺之路——免殺方法測試
- UI自動化測試框架Cypress初探UI框架
- Puppeteer 初探之前端自動化測試前端