Flink大數據分析實戰

內容簡介

本書由資深大數據專家精心編寫，循序漸進地介紹了Flink生態系統主流的大數據開發技術。全書共7章，第1章講解Flink的基礎知識，包括Flink套用場景、主要組件、編程模型等，最後通過一個單詞計數示例帶領讀者快速體驗Flink應用程式的編寫；第2、3章講解Flink的多種運行時架構、任務調度原理、數據分區以及Flink集群的安裝部署，同時包括Flink命令行操作、應用程式提交、常用Shell命令等；第4～7章講解了Flink流式計算DataStream API、關係型計算Table&SQL API以及圖計算框架Gelly等的基礎知識、架構原理，同時包括常用Shell命令、API操作、核心源碼剖析，並通過多個實際案例講解各個框架的具體套用以及與Hadoop生態系統框架Hive、Kafka的整合操作。本書內容翔實，實例豐富，適合Flink新手、大數據開發人員閱讀，也可作為培訓機構和大專院校相關專業的教學用書。

圖書目錄

第1章初識Flink 1

1.1 大數據開發總體架構 1

1.2 什麼是Flink 3

1.3 Flink的套用場景 5

1.4 流計算框架對比 6

1.5 Flink的主要組件 8

1.6 Flink編程模型 9

1.6.1 數據集 9

1.6.2 編程接口 11

1.6.3 程式結構 12

1.7 快速體驗Flink程式 13

1.7.1 IntelliJ IDEA安裝Scala外掛程式 13

1.7.2 IntelliJ IDEA創建Flink項目 15

1.7.3 示例：批處理單詞計數 17

1.7.4 示例：流處理單詞計數 20

第2章 Flink運行架構及原理 23

2.1 Flink運行時架構 23

2.1.1 YARN集群架構 23

2.1.2 Flink Standalone架構 27

2.1.3 Flink On YARN的架構 29

2.2 Flink任務調度原理 30

2.2.1 任務鏈 30

2.2.2 並行度 31

2.2.3 共享Task Slot 32

2.2.4 數據流 33

2.2.5 執行圖 34

2.2.6 執行計畫 35

2.3 Flink數據分區 38

2.3.1 分區數量 38

2.3.2 分區策略 39

第3章 Flink安裝及部署 41

3.1 Flink集群搭建 41

3.1.1 Flink本地模式搭建 42

3.1.2 Flink Standalone搭建 44

3.1.3 Flink On YARN搭建 46

Flink大數據分析實戰

基本介紹

內容簡介

圖書目錄

相關詞條

熱門詞條