cassandra壓縮特性介紹
cassandra1.0 compress特性介紹:
cassandra版本1.0增加了壓縮特性,與關係型資料庫資料檔案壓縮可能帶來系統讀寫效能損失相比,因為cassandra
資料檔案時一次重新整理的,而且不可修改的,所以對系統的效能反而有10%的效能提升。
一、cassandra compress適用的場景:
一個row中具有大量的column,而且column相同,至少具有大量共同的column,這種情況下可以達到很高的壓縮比,並且獲得
很好的讀效能。
二、如何配置cassandra壓縮:
cassandra的壓縮可以指定columnfamily級別的壓縮。壓縮具有兩個屬性(compression_options):
sstable_compression:指定壓縮演算法。
有兩種演算法:
SnappyCompressor ->google開源的Snappy壓縮庫,特點是壓縮解壓縮速度快
DeflateCompressor ->java zip 壓縮演算法,特點是壓縮率高
chunk_length_kb:指定壓縮資料塊的大小,以KB為單位,預設是64。
三、如何定義壓縮的columnfamily:
可以在定義CF指定壓縮屬性:
CREATE COLUMN FAMILY users
WITH key_validation_class=UTF8Type
AND column_metadata = [
{column_name: name, validation_class: UTF8Type}
{column_name: email, validation_class: UTF8Type}
{column_name: state, validation_class: UTF8Type}
{column_name: gender, validation_class: UTF8Type}
{column_name: birth_year, validation_class: LongType}
]
AND compression_options={sstable_compression:SnappyCompressor, chunk_length_kb:64};
也可以當前系統中修改CF屬性,新增壓縮特性:
update CF...
四、如果是更新CF,對現有資料如何處理:
當前已經存在的SSTable不會立刻進行壓縮,在正常的compaction過程是會對舊SSTable進行壓縮,新建立的SSTable會進行壓縮。
如果必要,可以透過使用nodetool scrub重建SSTable壓縮當前所有的SSTable檔案。
五、總結:
Cassandra 1.0的壓縮特性是一種簡單的在降低磁碟空間需求的同時提高系統效能的方式。壓縮特性可以很容易的更新到當前已存在的CF,
並且其實現允許高階使用者調整壓縮塊(chunk)的大小以獲取最大的效能。[@more@]
cassandra版本1.0增加了壓縮特性,與關係型資料庫資料檔案壓縮可能帶來系統讀寫效能損失相比,因為cassandra
資料檔案時一次重新整理的,而且不可修改的,所以對系統的效能反而有10%的效能提升。
一、cassandra compress適用的場景:
一個row中具有大量的column,而且column相同,至少具有大量共同的column,這種情況下可以達到很高的壓縮比,並且獲得
很好的讀效能。
二、如何配置cassandra壓縮:
cassandra的壓縮可以指定columnfamily級別的壓縮。壓縮具有兩個屬性(compression_options):
sstable_compression:指定壓縮演算法。
有兩種演算法:
SnappyCompressor ->google開源的Snappy壓縮庫,特點是壓縮解壓縮速度快
DeflateCompressor ->java zip 壓縮演算法,特點是壓縮率高
chunk_length_kb:指定壓縮資料塊的大小,以KB為單位,預設是64。
三、如何定義壓縮的columnfamily:
可以在定義CF指定壓縮屬性:
CREATE COLUMN FAMILY users
WITH key_validation_class=UTF8Type
AND column_metadata = [
{column_name: name, validation_class: UTF8Type}
{column_name: email, validation_class: UTF8Type}
{column_name: state, validation_class: UTF8Type}
{column_name: gender, validation_class: UTF8Type}
{column_name: birth_year, validation_class: LongType}
]
AND compression_options={sstable_compression:SnappyCompressor, chunk_length_kb:64};
也可以當前系統中修改CF屬性,新增壓縮特性:
update CF...
四、如果是更新CF,對現有資料如何處理:
當前已經存在的SSTable不會立刻進行壓縮,在正常的compaction過程是會對舊SSTable進行壓縮,新建立的SSTable會進行壓縮。
如果必要,可以透過使用nodetool scrub重建SSTable壓縮當前所有的SSTable檔案。
五、總結:
Cassandra 1.0的壓縮特性是一種簡單的在降低磁碟空間需求的同時提高系統效能的方式。壓縮特性可以很容易的更新到當前已存在的CF,
並且其實現允許高階使用者調整壓縮塊(chunk)的大小以獲取最大的效能。[@more@]
來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/23937368/viewspace-1055348/,如需轉載,請註明出處,否則將追究法律責任。
相關文章
- Apache Cassandra 4.0新特性介紹Apache
- pdf怎麼壓縮,好用的pdf壓縮工具介紹
- Word文件太大怎麼壓縮,專業的方法介紹
- MyRocksTTL特性介紹
- 五十鈴壓縮垃圾車特性,五十鈴壓縮垃圾車價格
- 前端效能優化gzip初探(補充gzip壓縮使用演算法brotli壓縮的相關介紹)前端優化演算法
- Jetbrains CLion特性介紹AI
- Jetbrains pycharm特性介紹AIPyCharm
- Jetbrains datagrip特性介紹AI
- Jetbrains goland特性介紹AIGoLand
- 物件儲存服務的壓縮特性物件
- 影片壓縮技術簡介
- Zookeeper 節點特性介紹
- MySQL 8.0 新增特性介紹MySql
- Kyma Application Connectivity 特性介紹APP
- TiDB 5.0.0新特性介紹TiDB
- Nginx網路壓縮 CSS壓縮 圖片壓縮 JSON壓縮NginxCSSJSON
- [譯] Chrome 71 新特性介紹Chrome
- AnalyticDB for PostgreSQL 6.0 新特性介紹SQL
- Angular 8的新特性介紹Angular
- webpack4新特性介紹Web
- 【IDL】IDL 8.4新特性介紹
- JavaScript 6 的新特性介紹JavaScript
- Docker的原理及特性介紹Docker
- logrotate自動輪換切割壓縮和清理歷史日誌場景介紹logrotate
- 檔案壓縮和解壓縮
- React v16.6 新特性介紹React
- Redis4.0的新特性介紹Redis
- Android Monkey 壓力測試 介紹Android
- Python實現壓縮和解壓縮Python
- linux下壓縮解壓縮命令Linux
- linux壓縮和解壓縮命令整理Linux
- JS壓縮方法及批量壓縮JS
- Linux tar分卷壓縮與解壓縮Linux
- Dash 2.16版本新特性介紹
- K8s的介紹和特性K8S
- Dash 2.17版本新特性介紹
- SQL?Server新特性SequenceNumber用法介紹YTZBSQLServer
- BootstrapBlazor 智慧生成神器(一)AutoGenerateColumnAttribute 特性介紹bootBlazor