hadoop 實現HIVE和HBASE協作！

今天裝好新的測試環境。

linux：CENTOS 5.4

ZOOKEEPER ： 3.3.2

base ： 0.20.6

hive ： 0.6

hadoop ： 0.20.2

 

首先搭建好HADOOP叢集

然後啟動ZOOKEEPER

然後啟動base

最後啟動HIVE的時候

要帶上一堆的JAR檔案

$HIVE_SRC/build/dist/bin/hive --auxpath $HIVE_SRC/build/dist/lib/hive_hbase-handler.jar,$HIVE_SRC/build/dist/lib/hbase-0.20.3.jar,$HIVE_SRC/hbase-handler/build/dist/lib/zookeeper-3.2.2.jar -hiveconf hbase.master=hbase.yoyodyne.com:60000

就OK了

建表的時候，也比較特殊：

CREATE TABLE hbase_table_1(key int, value string)
STORED BY 'org.apache.hadoop.hive.hbase.HBaseStorageHandler'
WITH SERDEPROPERTIES ("hbase.columns.mapping" = ":key,cf1:val")
TBLPROPERTIES ("hbase.table.name" = "xyz");

 

來自 “ ITPUB部落格 ” ，連結：http://blog.itpub.net/8183550/viewspace-683629/，如需轉載，請註明出處，否則將追究法律責任。