hadoop大數據技術與套用(2021年中國鐵道出版社出版的圖書)

《hadoop大數據技術與套用》是2021年中國鐵道出版社出版的圖書，作者是[中國]智酷道捷內容與產品中心。該書講述了大數據應用程式的設計與實現過程。

基本介紹

• 書名：hadoop大數據技術與套用
• 作者：[中國]智酷道捷內容與產品中心
• 出版社：中國鐵道出版社
• ISBN：9787113279431

內容簡介

本書是為所有熱愛大數據、打算從事大數據相關工作的讀者編寫的，適合有Java編程基礎的學習者參考使用。本書全面介紹了大數據技術生態圈，更在此基礎上全景展現了Hadoop大數據分散式系統集群平台的搭建、大數據分散式檔案系統HDFS、大數據分散式並行計算框架MapReduce、Hadoop大數據倉庫工具Hive和海量日誌採集工具Flume等大數據實用技術。本書通俗易懂、結構清晰，著重於分析解決問題的思路和具體實施過程。本書適合作為高等院校計算機相關專業的程式設計教材，也可作為Hadoop技術的培訓圖書。

圖書目錄

第1章 初識Hadoop及HDFS分散式系統1

1.1 初識Hadoop1

1.1.1大數據概述1

1.1.2大數據技術2

1.1.3Hadoop簡介3

1.2 分散式檔案系統（HDFS）6

1.2.1分散式檔案系統6

1.2.2HDFS的定義7

1.3 Hadoop偽分散式環境搭建12

1.3.1Hadoop安裝的三種模式 12

1.3.2搭建的準備工作 12

1.3.3Hadoop相關配置12

1.3.4啟動Hadoop13

1.4 HDFS常用命令與套用13

1.4.1HDFS命令行基本操作 13

1.4.2HDFS Java API的核心類

和接口21

1.4.3基於Java API的編程實例 21

小結55

習題55

第2章 分散式協調服務——ZooKeeper

和HDFS高可用性56

2.1 ZooKeeper的作用和基本概念56

2.1.1分散式套用概述56

2.1.2分散式套用的優缺點57

2.1.3ZooKeeper 的概念和特點58

2.1.4ZooKeeper 的主要套用58

2.1.5ZooKeeper的架構58

2.1.6數據模型與層次命名空間59

2.1.7Znode的類型59

2.2 ZooKeeper集群的搭建60

2.3 ZooKeeper操作與API編程69

2.3.1服務端常用命令 69

2.3.2客戶端連線ZooKeeper的

相關操作70

2.3.3使用Java API訪問

ZooKeeper75

2.3.4使用Java API編程

——入門案例75

2.3.5使用Java API編程

——官方案例解讀93

2.4 ZooKeeper原理分析105

2.4.1一致性協定——Zab協定105

2.4.2Leader選舉106

2.5 高可用108

2.6 HDFS快取108

2.7 HDFS完全分散式搭建115

2.8 HDFS高可用架構搭建116

2.8.1HDFS的基本架構116

2.8.2HDFS高可用架構116

2.8.3高可用架構搭建思路117

小結118

習題118

第3章 分散式並行計

作者簡介

智酷道捷是中關村智酷雙創人才服務股份有限公司下屬高科技教育企業。旨在打造“產、學、研、用”雙創一 體化深度融合的智慧型化泛 IT 產教綜合服務平台。是一家專注於面向 高校提供“產、學、研、用”一體化雙創實踐性教學解決方案，面向 高新技術職業技能持續培育的創新型科技教育企業。公司專注於前沿 技術——基於雲計算、大數據、以及智慧型化控制等高新技術開發的全新資源與服務平台。公司借鑑已開發國家先進的技術套用教學經驗並結合中國國情，創新提出“雙創雙元、雙元雙通”理論模型，通過“工程實踐中心”這一創新載體，整合高校教育與產業實踐套用，基於雲平台的大數據反饋和自適應機制，打造形成以產業套用需求為引領，以崗位技能能力圖表為核心線索的智慧型化課程研發體系，將產業套用需求、高校教育過程以及課程研發機制、產教協同育人進行一體化聯動和融合，實現雙創實踐性套用人才智慧型化、生態化、個性化、本地化培育，為地方企業和高校提供優質的實踐性課程與人才服務。