初識Hive:3張圖瞭解Hive的資料型別、架構圖!
Hive是一個構建在Hadoop上的資料倉儲框架,可以將結構化的資料檔案,對映為一張資料庫表,並提供完整的sql查詢功能。可以將sql語句,轉換為MapReduce任務進行執行。
Hive選擇Hadoop來儲存和處理資料,因為Hadoop有較好的價效比。Hive設計的目標是讓精通SQL技能(Java較弱的)分析師,能夠從存放在HDFS的大規模資料集上,執行查詢。
Hive 一般在工作站上執行,將SQL查詢轉換為一系列MapReducejob,在Hadoopcluster上執行。
表模式等後設資料存放在名為metastore的資料庫中。預設的metastore在本地執行。此時建立的Hive表在本地上,無法與其它使用者共享。
Hive優點
Hive學習成本低,可以通過類SQL語句快速實現簡單的MapReduce統計,不必開發專門的MapReduce應用,十分適合資料倉儲的統計分析。
安裝和啟動Hive
解壓縮:
$ tar xvzfhive-1.X.X-dev.tar.gz
配置路徑:
export HIVE_INSTALL=/home/hadoop-2.X/hive
export PATH=$PATH:$HIVE_INSTALL/bin
啟動Hive shell:
$ hive
hive>
Hive資料型別
SQL和HiveQL的概要比較
Hive客戶端
如果以伺服器方式執行:
hive –service hiveserver2
可以在應用程式中,以不同機制連線到伺服器:
nmaplocalhost
ufwdisable
Hive架構
Hive選擇Hadoop來儲存和處理資料,因為Hadoop有較好的價效比。Hive設計的目標是讓精通SQL技能(Java較弱的)分析師,能夠從存放在HDFS的大規模資料集上,執行查詢。
Hive 一般在工作站上執行,將SQL查詢轉換為一系列MapReducejob,在Hadoopcluster上執行。
表模式等後設資料存放在名為metastore的資料庫中。預設的metastore在本地執行。此時建立的Hive表在本地上,無法與其它使用者共享。
Hive優點
Hive學習成本低,可以通過類SQL語句快速實現簡單的MapReduce統計,不必開發專門的MapReduce應用,十分適合資料倉儲的統計分析。
安裝和啟動Hive
解壓縮:
$ tar xvzfhive-1.X.X-dev.tar.gz
配置路徑:
export HIVE_INSTALL=/home/hadoop-2.X/hive
export PATH=$PATH:$HIVE_INSTALL/bin
啟動Hive shell:
$ hive
hive>
Hive資料型別
SQL和HiveQL的概要比較
Hive客戶端
如果以伺服器方式執行:
hive –service hiveserver2
可以在應用程式中,以不同機制連線到伺服器:
nmaplocalhost
ufwdisable
Hive架構
相關文章
- Hive之 資料型別Hive資料型別
- Hive學習筆記 2 Hive的資料型別Hive筆記資料型別
- Hive之 hive架構Hive架構
- Hive中的集合資料型別Hive資料型別
- 大資料時代的技術hive:hive的資料型別和資料模型大資料Hive資料型別模型
- hive複雜資料型別的用法Hive資料型別
- Hive架構Hive架構
- hive從入門到放棄(一)——初識hiveHive
- Hive中的資料型別以及案例實操Hive資料型別
- 【Hive】hive資料遷移Hive
- 8張圖瞭解JAVA整體構架知識體系!Java
- hive學習筆記之一:基本資料型別Hive筆記資料型別
- 使用 Hive 構建資料庫Hive資料庫
- 三、資料型別初識資料型別
- [hive]hive資料模型中四種表Hive模型
- 大資料時代的技術hive:hive介紹大資料Hive
- hive學習之一:認識hiveHive
- HIVE 資料同步Hive
- 圖解大資料 | 海量資料庫查詢-Hive與HBase詳解圖解大資料資料庫Hive
- Hive學習之型別轉化Hive型別
- 【大資料開發】Hive——Hive函式大全大資料Hive函式
- Hive學習筆記 4 Hive的資料匯入Hive筆記
- Hive:資料倉儲構建步驟Hive
- 大白話詳解大資料hive知識點,老劉真的很用心(3)大資料Hive
- 【HIVE】hive 使用shell指令碼跑歷史資料Hive指令碼
- 初識Redis的資料型別HyperLogLogRedis資料型別
- 一張圖瞭解Spring Cloud微服務架構SpringCloud微服務架構
- Hive資料匯出Hive
- Hive資料傾斜Hive
- Hive學習之六 《Hive進階— —hive jdbc》 詳解HiveJDBC
- 【Hive】日期從整形轉為Date型別Hive型別
- Hive學習筆記 5 Hive的資料查詢、函式Hive筆記函式
- Hive --------- hive 的優化Hive優化
- 一張圖解釋各種資料庫型別圖解資料庫型別
- spark寫入hive資料SparkHive
- Hive資料格式轉換Hive
- Hive 資料更新時間Hive
- 大資料技術 - Hive大資料Hive