好程式設計師大資料培訓分享HBase Filter過濾器概述

好程式設計師發表於2020-06-03

  好程式設計師大資料培訓分享HBase Filter過濾器概述,過濾器介紹

HBase過濾器是一套為完成一些較高階的需求所提供的API介面。

過濾器也被稱為下推判斷器(push-down predicates),支援把資料過濾標準從客戶端下推到伺服器,帶有 Filter 條件的 RPC 查詢請求會把 Filter 分發到各個 RegionServer,所有的過濾器都在服務端生效,使被過濾掉的資料不會被傳送到客戶端,這些過濾邏輯在讀操作時使用,可以有效降低網路傳輸的壓力。

過濾器組成

過濾器主要有過濾器本身、比較器和比較運算子組成。

1. 運算子

抽象運算子,也叫比較運算子。

LESS:小於

LESS_OR_EQUAL:小於等於

EQUAL:等於

NOT_EQUAL:不等於

GREATER:大於

GREATER_OR_EQUAL:大於等於

NO_OP:排除一切值

2. 比較器

BinaryComparator:二進位制比較器,用於按字典順序比較指定位元組陣列。

BinaryPrefixComparator:二進位制比較器,只比較字首是否與指定位元組陣列相同。

NullComparator:控制比較式,判斷當前值是不是為null。

BitComparator:位比價器,透過BitwiseOp提供的AND(與)、OR(或)、NOT(非)進行比較。

RegexStringComparator:提供一個正則的比較器,支援正規表示式的值比較,僅支援 EQUAL 和非 EQUAL。

SubstringComparator:判斷提供的子串是否出現在value中,並且不區分大小寫。

過濾器家族

HBase 內建了多種過濾器,這些過濾器或直接或間接都繼承於FilterBase抽象類。


來自 “ ITPUB部落格 ” ,連結:http://blog.itpub.net/69913864/viewspace-2695820/,如需轉載,請註明出處,否則將追究法律責任。

相關文章