Hadoop集群與安全 pdf epub mobi txt 電子書 下載2025

想要找書就要到 小美書屋

立刻按 ctrl+D收藏本頁

你會得到大驚喜!!

本書手把手教你手動配置高效的Hadoop集群，以便充分利用Hadoop平颱的優勢, 並為Hadoop生態係統實現強健的端到端的安全保障。

本書分為兩部分，共13章：第1章概述主要的Hadoop組件以及選擇規劃；第2章講解安裝和配置主要Hadoop組件的詳細步驟；第3章介紹Sqoop、Hive和Impala的配置步驟；第4章講解確保各種Hadoop組件安全的方法；第5章指導讀者逐步將集群開發至實際應用階段；第6章介紹如何在虛擬環境中使用Hadoop；第7章詳細介紹大數據安全參考框架；第8章詳細介紹Hadoop安全保障係統的內部設計細節以及關鍵概念；第9章提供配置Kerberos並建立安全Hadoop集群的詳細步驟；第10章介紹Hadoop生態係統組件之間的交互和通信協議；第11章關注如何集成Hadoop安全模型與企業已有的安全係統；第12章提供保護Hadoop生態係統中敏感數據的詳細實現方法；第13章深入介紹大數據平颱中安全事件監控係統，提供實現安全流程和策略的最新實踐。

作者簡介

Danil Zburivsky　資深數據庫管理員，目前是全球數據基礎構架管理公司Pythian的谘詢師，其客戶涉及金融、娛樂以及通信領域，主要方嚮是創建各種Hadoop集群。研究興趣包括Python編程、機器學習等。

Sudheesh Narayanan　在大數據解決方案谘詢與實施領域具有豐富經驗的實踐者和技術戰略傢。他在IT領域的經驗超過15年，涉及信息管理、商務智能、大數據分析及雲應用和J2EE應用開發等。

譯者簡介

劉傑　中國科學院軟件所副研究員，具有多年Hadoop平颱研發與實施經驗，與團隊一起研發基於Hadoop的可視化大數據分析工具Haflow，該工具應用於醫療、交通等多個領域。研究方嚮包括企業數據集成、麵嚮大數據的係統軟件、數據挖掘等。

瀋鑫　 畢業於同濟大學計算機科學與技術係，資深網絡工程師，從事網絡安全、管理信息係統的開發與維護，參與開發瞭多個相關的項目。興趣愛好是網絡安全技術與嵌入式技術。

目　錄
譯者序
作者簡介
審校者簡介
前言
第1章　構建Hadoop集群1
1.1　選擇Hadoop集群硬件2
1.1.1　選擇DataNode硬件3
1.1.2　低存儲密度集群4
1.1.3　高存儲密度集群5
1.1.4　NameNode和JobTracker硬件配置6
1.1.5　網關和其他輔助服務8
1.1.6　網絡配置8
1.1.7　Hadoop硬件總結9
1.2　Hadoop發行版10
1.2.1　Hadoop版本10
1.2.2　選擇Hadoop發行版11
1.2.3　Cloudera Hadoop 發行版11
1.2.4　Hortonworks Hadoop發行版12
1.2.5　MapR12
1.3　為Hadoop集群選擇操作係統13
1.4　小結14
第2章　安裝和配置Hadoop15
2.1　在Hadoop集群中配置操作係統15
2.1.1　選擇和設置文件係統15
2.1.2　設置Java開發包16
2.1.3　其他操作係統設定17
2.1.4　設置CDH存儲庫18
2.2　設置NameNode18
2.2.1　JournalNode節點、ZooKeeper以及故障轉移控製器22
2.2.2Hadoop配置文件23
2.2.3　NameNode高可用方案配置25
2.2.4　JobTracker配置31
2.2.5DataNode配置36
2.3　小結47
第3章　配置Hadoop生態係統48
3.1托管Hadoop生態項目48
3.2　Sqoop49
3.2.1安裝和配置Sqoop49
3.2.2　Sqoop導入示例50
3.2.3　Sqoop導齣示例52
3.3　Hive52
3.3.1Hive架構53
3.3.2安裝Hive Metastore54
3.3.3　安裝Hive客戶端　56
3.3.4　安裝Hive Server57
3.4Impala59
3.4.1　Impala架構59
3.4.2　安裝Impala state store60
3.4.3　安裝Impala server60
3.5　小結63
第4章　Hadoop安全64
4.1　Hadoop安全概述64
4.2　Hadoop分布式文件係統安全65
4.3　MapReduce安全66
4.4　Hadoop服務級彆驗證 68
4.5　Hadoop和Kerberos69
4.5.1　Kerberos概述70
4.5.2　Hadoop中的Kerberos71
4.6　小結76
第5章　監控Hadoop集群77
5.1　監控策略介紹77
5.2　Hadoop參數78
5.2.1　JMX參數79
5.2.2　使用Nagios監控Hadoop80
5.2.3　監控Hadoop分布式文件係統81
5.2.4　NameNode校驗81
5.2.5　JournalNode檢查83
5.2.6　ZooKeeper檢查83
5.3　監控MapReduce84
5.4　使用Ganglia監控Hadoop85
5.5　小結86
第6章　在雲端使用Hadoop87
6.1　Amazon Elastic MapReduce87
6.1.1　安裝EMR命令行接口88
6.1.2　選擇Hadoop版本89
6.1.3　啓動EMR集群89
6.2　使用Whirr93
6.3　小結94
第7章　Hadoop平颱安全概述95
7.1　為什麼需要保障Hadoop生態係統的安全96
7.2　確保Hadoop生態係統安全麵臨的挑戰96
7.3　關鍵安全因素97
7.4　小結99
第8章　Hadoop安全體係設計100
8.1　什麼是Kerberos100
8.1.1　Kerberos關鍵術語101
8.1.2　Kerberos如何工作102
8.1.3　Kerberos 的優點103
8.2　不采用Kerberos的Hadoop默認安全模型103
8.3　Hadoop Kerberos 安全模型實現105
8.3.1　用戶層次的訪問控製105
8.3.2　服務層次的訪問控製105
8.3.3　用戶和服務認證106
8.3.4　授權令牌106
8.3.5　作業令牌106
8.3.6　數據塊訪問令牌107
8.4　小結108
第9章　配置一個安全Hadoop集群109
9.1　前提條件109
9.2　設置Kerberos110
9.3　配置Hadoop使用Kerberos認證117
9.3.1　在所有Hadoop節點設置Kerberos客戶端117
9.3.2　配置Hadoop服務標識118
9.4　Hadoop用戶設置124
9.5　安全Hadoop自動部署124
9.6　小結125
第10章　Hadoop生態係統安全保障126
10.1　為Hadoop生態係統組件配置Kerberos127
10.1.1　Hive安全設置127
10.1.2　Oozie安全設置130
10.1.3　Flume安全設置131
10.1.4　HBase安全設置134
10.1.5　Sqoop安全設置137
10.1.6　Pig安全設置138
10.2　Hadoop生態係統組件安全保障最佳實踐138
10.3　小結139
第11章　集成Hadoop與企業安全係統140
11.1　集成EIM係統141
11.1.1　配置EIM與Hadoop集成142
11.1.2　集成基於Active Directory的EIM係統與Hadoop生態係統143
11.2　從企業網絡訪問安全Hadoop集群144
11.2.1　HttpFS145
11.2.2　HUE145
11.2.3　Knox Gateway Server146
11.3　小結147
第12章　Hadoop中敏感數據安全保護148
12.1　Hadoop中敏感數據及保護方法148
12.2　小結154
第13章　安全事件與審計日誌155
13.1　Hadoop集群安全事故和事件監控155
13.2　Hadoop集群審計日誌設置158
13.3　小結160
附錄　Hadoop安全機製解決方案161
· · · · · · (收起)