Hive編程技術與套用

《Hive編程技術與套用》是2018年水利水電出版社出版的圖書，作者是孫帥、王美佳。

基本介紹

• 中文名：Hive編程技術與套用
• 作者：孫帥、王美佳
• 類別：教材
• 出版社：水利水電出版社
• 出版時間：2018年11月
• 定價：¥12.40
• 開本：16 開
• 裝幀：平裝-膠訂
• ISBN：9787517069140

內容簡介

《Hive編程技術與套用》通過原理加案例的方式系統地講解了Hive編程技術，使讀者能夠全面地了解使用Hive的開發流程。書中精心安排了Hive的原理分析、架構特點、環境搭建、HiveQL使用等內容，給出了大量的開發案例及其開發過程，使讀者對Hive開發有直觀的印象。

全書共10章：前6章系統講解Hive工作原理、特點，Hive架構，HiveQL表操作，HiveQL數據操作，HiveQL查詢，Hive安裝與配置，Hive自定義函式；第8～10章是綜合案例部分，通過案例幫助讀者掌握整個大數據項目的開發流程，包括數據清洗、數據處理、數據導入導出。本書知識結構簡單明了，案例生動具體，內容設計新穎，思路清晰。

《Hive編程技術與套用》不僅可作為普通高校大數據相關專業的教材，也可以作為想繼續深入了解大數據編程的讀者的參考書，還可作為各類相關培訓班的培訓教材。

目錄

前言

章 Hive介紹

1．1 Hive工作原理

1．2 Hive的數據類型

1．3 Hive的特點

1．4 本章小結

第2章 Hive架構

2．1 Hive用戶接口

2．1．1 Hive CLI

2．1．2 HWI

2．1．3 Thrift服務

2．2 Hive元資料庫

2．2．1 Hive元數據表結構

2．2．2 Hive元數據的三種存儲模式

2．3 Hive數據存儲

2．4 Hive檔案格式

2．4．1 TextFile格式

2．4．2 SequenceFile格式

2．4．3 RCFile格式

2．4．4 ORC格式

2．5 本章小結

第3章 HiveQL表操作

3．1 內部表

3．2 外部表

3．3 分區表

3．3．1 靜態分區

3．3．2 動態分區

3．4 桶表

3．5 視圖

3．5．1 使用視圖降低查詢複雜度

3．5．2 使用視圖來限制基於條件過濾的數據

3．5．3 動態分區中的視圖和map類型

3．6 本章小結

第4章 HiveQL數據操作

4．1 裝載數據到表中

4．2 通過查詢語句向表中插入數據

4．3 單個查詢語句中創建並載入數據

4．4 導出數據

4．5 本章小結

第5章 HiveQL查詢

5．1 SELECT…FROM語句

5．1．1 使用正則表達式來指定列的

5．1．2 使用列值進行計算

5．1．3 算述運算符

5．1．4 使用函式

5．1．5 LIMIT語句

5．1．6 列別名

5．1．7 嵌套SELECT語句

5．1．8 CASE…WHEN…THEN語句

5．2 WHERE語句

5．2．1 謂詞操作符

5．2．2 關於浮點數比較

5．2．3 LIKE和RLIKE

5．3 GROtJPBY語句

5．4．JOIN語句

5．4．1 INNER JOIN

5．4．2 JOIN最佳化

5．4．3 LEFTOUTER JOIN

5．4．4 R1GHTOUTER JOIN

5．4．5 FULLOUTER JOIN

5．4．6 LEFT SEMI JOIN

5．4．7 笛卡爾積JOIN

5．4．8 mad-side JOIN

5．5 ORDER BY和SOPT BY

5．6 含有SOftT BY的DISTRIBIJTE BY

5．7 CLUSTER BY

5．8 類型轉換

5．9 抽樣查詢

5．9．1 數據塊抽樣

5．9．2 分桶表的輸入裁剪

5．1 0LINIONALL

5．1 1本章小結

第6章 Hive配置與套用

6．1 Hive安裝與配置

6．2 Hive訪問

6．3 Hive基本操作

6．3．1 Hive CLI命令行操作講解

6．3．2 Hive的數據類型

6．3．3 Hive表的創建

6．3．4 Hive數據導入

6．3．5 Hive數據導出

6．4 Hive數據定義

6．4．1 內部表與外部表的區別

6．4．2 內部表建立

6．4．3 外部表建立

6．4．4 表的分區與桶的建立

6．4．5 刪除表與修改表結構

6．4．6 HiveQL簡單查詢語句

6．4．7 WHERE語句

6．5 Hive高級查詢

6．6 本章小結

第7章Hive自定義函式

7．1 LIDF

7．2 UDTF

7．3 UDAF

7．4 Hive函式綜合案例

7．4．1 Row-Sequence實現列自增長

7．4．2 列轉行和行轉列

7．5 本章小結

第8章Hive綜合案例（一）

8．1 項目背景與數據情況

8．2 關鍵指標KPI

8．3 開發步驟分析

8．4 表結構設計

8．5 數據清洗過程

8．5．1 定期上傳日誌至HDFS

8．5．2 編寫．MapReduce程式清理日誌

8．5．3 定期清理日誌至HDFS

8．5．4 查詢清洗前後的數據

8．6 數據統計分析

8．6．1 藉助Hive進行統計

8．6．2 使用HiveQL統計關鍵指標

8．7 本章小結

第9章Hive綜合案例（二）

9．1 項目套用場景

9．2 設計與實現

9．2．1 日誌格式分析

9．2．2 建立表

9．2．3 程式設計

9．2．4 編碼實現

9．2．5 運行並測試

9．3 本章小結

0章Hive綜合案例（三）

10．1 套用場景

10．2 設計與實現

10．2．1 數據處理

10．2．2 使用Hive對清洗後的數據進行多維分析

10．2．3 在MySQL中建立資料庫

10．2．4 使用sqoop把分析結果導入到MySQL中

10．2．5 程式設計與實現

10．2．6 運行並測試

10．3 本章總結

附錄