滿額折
大數據平臺運維(初級)（簡體書）
相關商品
商品簡介
作者簡介
目次
商品簡介
本書為“1+X”職業技能等級證書配套教材，按國家“1+X”大數據平臺運維職業技能等級標準編寫。本書屬大數據平臺運維初級教材，從大數據平臺運維工程師角度由淺入深、全方位地介紹大數據平臺運維的相關基礎知識和基本實操。本書共分6個部分18章，第一部分為大數據平臺安裝，涉及平臺操作系統的使用、Hadoop平臺安裝、平臺基礎環境配置；第二部分為大數據平臺配置，涉及Hadoop文件參數配置、Hadoop集群運行；第三部分為大數據平臺組件的安裝與配置，涉及Hive、HBase、ZooKeeper、Sqoop和Flume組件的安裝與配置；第四部分為大數據平臺實施，涉及大數據平臺實施方案、培訓方案；第五部分為大數據平臺監控，涉及基於大數據平臺的監控命令、監控界面和報表、日誌和告警信息監控；第六部分為大數據運維綜合實戰案例，以實際項目為例介紹從平臺部署、數據業務採集、數據分析到數據可視化的整體基礎實施過程，並介紹了大數據平臺運維的常見故障及處理流程。本書可作為中高職院校大數據及計算機類相關專業的教材，也可作為大數據平臺運維人員的參考用書。
作者簡介
紫光股份旗下新華三集團作為數字化解決方案領導者，致力於成為客戶業務創新、數字化轉型最可信賴的合作夥伴。新華三擁有計算、存儲、網絡、5G、安全等全方位的數字化基礎設施整體能力，提供雲計算、大數據、人工智能、工業互聯網、信息安全、智能聯接、新安防、邊緣計算等在內的一站式數字化解決方案，以及端到端的技術服務。同時，新華三也是HPE 服務器、存儲和技術服務的中國獨家提供商。
目次
目 錄
第一部分 大數據平臺安裝
第1章 平臺操作系統的使用 3
1.1 Linux操作系統概述 3
1.1.1 Linux操作系統的起源 3
1.1.2 Linux操作系統的特點 4
1.1.3 Linux操作系統的應用場景 5
1.1.4 Linux版本 6
1.2 Linux常用命令 7
1.2.1 文件與目錄操作 7
1.2.2 用戶操作 9
1.2.3 文本操作 10
1.2.4 系統操作 11
1.3 Linux操作系統用戶信息 14
1.3.1 用戶和組 14
1.3.2 文件類型和權限 15
1.4 本章小結 17
第2章 Hadoop平臺安裝 18
2.1 Hadoop概述 18
2.1.1 Hadoop的起源 18
2.1.2 Hadoop的生態圈 19
2.1.3 Hadoop的版本 21
2.1.4 Hadoop的優點 22
2.1.5 Hadoop的應用場景 22
2.1.6 Hadoop的運行模式 23
2.2 Hadoop的核心組件 23
2.2.1 HDFS 23
2.2.2 MapReduce 26
2.2.3 YARN 28
2.3 平臺操作系統環境設置 29
2.3.1 配置Linux操作系統基礎
環境 30
2.3.2 安裝Java環境 32
2.4 安裝Hadoop軟件 35
2.4.1 獲取Hadoop安裝包 35
2.4.2 安裝Hadoop軟件 35
2.4.3 修改目錄所有者和所有者組 36
2.5 安裝單機版Hadoop系統 36
2.5.1 配置Hadoop配置文件 37
2.5.2 測試Hadoop本地模式的
運行 37
2.6 本章小結 38
第3章 平臺基礎環境配置 39
3.1 集群網絡連接 39
3.1.1 實驗環境下的大數據Hadoop
平臺集群網絡 39
3.1.2 生產環境下的大數據Hadoop
平臺集群網絡 40
3.2 SSH無密碼登錄 41
3.2.1 SSH簡介 41
3.2.2 SSH特點介紹 41
3.2.3 非對稱加密機制 42
3.2.4 SSH安全機制 42
3.2.5 SSH基於口令的安全驗證 43
3.2.6 基於密鑰的安全驗證 43
3.3 集群網絡配置 44
3.3.1 實驗環境下的集群網絡配置 44
3.3.2 生產環境下的集群網絡配置 44
3.4 SSH無密碼驗證配置 47
3.4.1 生成SSH密鑰 47
3.4.2 交換SSH密鑰 49
3.4.3 驗證SSH無密碼登錄 50
3.5 本章小結 51
第二部分 大數據平臺配置
第4章 Hadoop文件參數配置 55
4.1 Hadoop配置文件說明 55
4.1.1 Hadoop環境配置 55
4.1.2 Hadoop守護進程環境配置 56
4.1.3 Hadoop配置參數格式 57
4.1.4 獲得Hadoop集群全部配置
信息 57
4.2 在master節點上安裝Hadoop 58
4.3 配置hdfs-site.xml文件參數 58
4.4 配置core-site.xml文件參數 59
4.5 配置mapred-site.xml 60
4.6 配置yarn-site.xml 61
4.7 Hadoop其他相關配置 62
4.8 本章小結 63
第5章 Hadoop集群運行 64
5.1 Hadoop運行狀態 64
5.2 配置Hadoop格式化 68
5.3 查看Java進程 69
5.4 查看HDFS的報告 70
5.5 使用瀏覽器查看節點狀態 71
5.6 停止Hadoop 74
5.7 本章小結 74
第三部分 大數據平臺組件的安裝與配置
第6章 Hive組件的安裝與配置 77
6.1 Hive相關知識 77
6.2 Hive組件架構 78
6.3 下載和解壓安裝文件 79
6.3.1 基礎環境和安裝準備 79
6.3.2 解壓安裝文件 79
6.4 設置Hive環境 80
6.4.1 卸載MariaDB數據庫 80
6.4.2 安裝MySQL數據庫 80
6.4.3 配置Hive組件 85
6.5 初始化Hive元數據 87
6.6 啟動Hive 89
6.7 本章小結 89
第7章 HBase組件的安裝與配置 90
7.1 HBase相關知識 90
7.2 HBase功能應用 91
7.3 HBase組件設置 92
7.4 HBase安裝與配置 94
7.5 HBase常用Shell命令 98
7.6 本章小結 101
第8章 ZooKeeper組件的安裝與配置 102
8.1 ZooKeeper相關知識 102
8.1.1 ZooKeeper的重要概念 103
8.1.2 ZooKeeper的特點 104
8.2 ZooKeeper選項設置 104
8.3 ZooKeeper角色選舉 105
8.4 下載和安裝ZooKeeper 105
8.5 ZooKeeper的配置選項 106
8.5.1 master節點配置 106
8.5.2 slave節點配置 106
8.5.3 系統環境變量配置 106
8.6 啟動ZooKeeper 107
8.7 本章小結 107
第9章 Sqoop組件的安裝與配置 108
9.1 Sqoop相關知識 108
9.2 Sqoop的功能應用 109
9.2.1 Sqoop架構 109
9.2.2 Sqoop導入原理 109
9.2.3 Sqoop導出原理 110
9.3 下載和解壓Sqoop 112
9.4 配置Sqoop環境 112
9.5 啟動Sqoop 113
9.6 Sqoop模板命令 114
9.7 Sqoop組件應用 116
9.8 本章小結 117
第10章 Flume組件的安裝與配置 118
10.1 Flume相關知識 118
10.2 Flume功能應用 119
10.2.1 Flume功能 119
10.2.2 Flume結構 119
10.3 Flume組件設置 119
10.4 下載和解壓Flume 120
10.5 Flume組件部署 121
10.6 使用Flume發送和接收
信息 121
10.7 本章小結 122
第四部分 大數據平臺實施
第11章 大數據平臺實施方案的理解 125
11.1 系統實施方案概述 125
11.1.1 方案概述 125
11.1.2 項目實施思路 126
11.1.3 項目實施流程 126
11.2 確認客戶需求 127
11.2.1 確認需求分析準備 127
11.2.2 進行確認需求調研 127
11.2.3 系統詳細需求分析 129
11.3 編寫大數據平臺實施方案 129
11.3.1 大數據平臺規劃 129
11.3.2 大數據平臺部署 131
11.3.3 項目實施計劃 131
11.3.4 項目實施人員 132
11.4 執行實施方案過程 133
11.4.1 實施內容 133
11.4.2 實施流程 133
11.5 系統測試 133
11.6 項目驗收 135
11.7 本章小結 135
第12章 客戶培訓方案的制定 136
12.1 培訓方案概述 136
12.2 客戶培訓方案要點 137
12.2.1 培訓目標 137
12.2.2 培訓對象 138
12.2.3 培訓形式 139
12.2.4 培訓內容 139
12.2.5 培訓計劃 140
12.3 文檔製作工具 140
12.3.1 製作甘特圖 140
12.3.2 製作WBS圖 143
12.4 大數據平臺操作演示 145
12.4.1 演示內容選取 145
12.4.2 演示的步驟 146
12.4.3 演示的技巧 147
12.4.4 演示注意事項 148
12.5 本章小結 148
第五部分 大數據平臺監控
第13章 大數據平臺監控命令 151
13.1 大數據平臺運行狀態 151
13.1.1 大數據平臺主機系統狀態 152
13.1.2 大數據平臺Hadoop狀態 153
13.2 大數據平臺資源狀態 153
13.2.1 YARN資源狀態 154
13.2.2 HDFS資源狀態 154
13.2.3 HBase狀態 155
13.2.4 Hive狀態 155
13.3 大數據平臺服務狀態 156
13.3.1 ZooKeeper服務狀態 156
13.3.2 Sqoop服務狀態 157
13.3.3 Flume服務狀態 157
13.4 通過命令監控大數據平臺的
運行狀態 157
13.4.1 通過命令查看大數據平臺
狀態 157
13.4.2 通過命令查看Hadoop
狀態 165
13.5 通過命令監控大數據平臺的
資源狀態 166
13.5.1 通過命令查看YARN狀態 166
13.5.2 通過命令查看HDFS狀態 167
13.5.3 通過命令查看HBase狀態 168
13.5.4 通過命令查看Hive狀態 171
13.6 通過命令監控大數據平臺的
服務狀態 174
13.6.1 通過命令查看ZooKeeper
狀態 174
13.6.2 通過命令查看Sqoop狀態 178
13.6.3 通過命令查看Flume狀態 180
13.7 本章小結 181
第14章 大數據平臺監控界面和報表 182
14.1 大數據平臺常用組件 182
14.2 通過界面監控大數據平臺的
運行狀態 183
14.2.1
第一部分 大數據平臺安裝
第1章 平臺操作系統的使用 3
1.1 Linux操作系統概述 3
1.1.1 Linux操作系統的起源 3
1.1.2 Linux操作系統的特點 4
1.1.3 Linux操作系統的應用場景 5
1.1.4 Linux版本 6
1.2 Linux常用命令 7
1.2.1 文件與目錄操作 7
1.2.2 用戶操作 9
1.2.3 文本操作 10
1.2.4 系統操作 11
1.3 Linux操作系統用戶信息 14
1.3.1 用戶和組 14
1.3.2 文件類型和權限 15
1.4 本章小結 17
第2章 Hadoop平臺安裝 18
2.1 Hadoop概述 18
2.1.1 Hadoop的起源 18
2.1.2 Hadoop的生態圈 19
2.1.3 Hadoop的版本 21
2.1.4 Hadoop的優點 22
2.1.5 Hadoop的應用場景 22
2.1.6 Hadoop的運行模式 23
2.2 Hadoop的核心組件 23
2.2.1 HDFS 23
2.2.2 MapReduce 26
2.2.3 YARN 28
2.3 平臺操作系統環境設置 29
2.3.1 配置Linux操作系統基礎
環境 30
2.3.2 安裝Java環境 32
2.4 安裝Hadoop軟件 35
2.4.1 獲取Hadoop安裝包 35
2.4.2 安裝Hadoop軟件 35
2.4.3 修改目錄所有者和所有者組 36
2.5 安裝單機版Hadoop系統 36
2.5.1 配置Hadoop配置文件 37
2.5.2 測試Hadoop本地模式的
運行 37
2.6 本章小結 38
第3章 平臺基礎環境配置 39
3.1 集群網絡連接 39
3.1.1 實驗環境下的大數據Hadoop
平臺集群網絡 39
3.1.2 生產環境下的大數據Hadoop
平臺集群網絡 40
3.2 SSH無密碼登錄 41
3.2.1 SSH簡介 41
3.2.2 SSH特點介紹 41
3.2.3 非對稱加密機制 42
3.2.4 SSH安全機制 42
3.2.5 SSH基於口令的安全驗證 43
3.2.6 基於密鑰的安全驗證 43
3.3 集群網絡配置 44
3.3.1 實驗環境下的集群網絡配置 44
3.3.2 生產環境下的集群網絡配置 44
3.4 SSH無密碼驗證配置 47
3.4.1 生成SSH密鑰 47
3.4.2 交換SSH密鑰 49
3.4.3 驗證SSH無密碼登錄 50
3.5 本章小結 51
第二部分 大數據平臺配置
第4章 Hadoop文件參數配置 55
4.1 Hadoop配置文件說明 55
4.1.1 Hadoop環境配置 55
4.1.2 Hadoop守護進程環境配置 56
4.1.3 Hadoop配置參數格式 57
4.1.4 獲得Hadoop集群全部配置
信息 57
4.2 在master節點上安裝Hadoop 58
4.3 配置hdfs-site.xml文件參數 58
4.4 配置core-site.xml文件參數 59
4.5 配置mapred-site.xml 60
4.6 配置yarn-site.xml 61
4.7 Hadoop其他相關配置 62
4.8 本章小結 63
第5章 Hadoop集群運行 64
5.1 Hadoop運行狀態 64
5.2 配置Hadoop格式化 68
5.3 查看Java進程 69
5.4 查看HDFS的報告 70
5.5 使用瀏覽器查看節點狀態 71
5.6 停止Hadoop 74
5.7 本章小結 74
第三部分 大數據平臺組件的安裝與配置
第6章 Hive組件的安裝與配置 77
6.1 Hive相關知識 77
6.2 Hive組件架構 78
6.3 下載和解壓安裝文件 79
6.3.1 基礎環境和安裝準備 79
6.3.2 解壓安裝文件 79
6.4 設置Hive環境 80
6.4.1 卸載MariaDB數據庫 80
6.4.2 安裝MySQL數據庫 80
6.4.3 配置Hive組件 85
6.5 初始化Hive元數據 87
6.6 啟動Hive 89
6.7 本章小結 89
第7章 HBase組件的安裝與配置 90
7.1 HBase相關知識 90
7.2 HBase功能應用 91
7.3 HBase組件設置 92
7.4 HBase安裝與配置 94
7.5 HBase常用Shell命令 98
7.6 本章小結 101
第8章 ZooKeeper組件的安裝與配置 102
8.1 ZooKeeper相關知識 102
8.1.1 ZooKeeper的重要概念 103
8.1.2 ZooKeeper的特點 104
8.2 ZooKeeper選項設置 104
8.3 ZooKeeper角色選舉 105
8.4 下載和安裝ZooKeeper 105
8.5 ZooKeeper的配置選項 106
8.5.1 master節點配置 106
8.5.2 slave節點配置 106
8.5.3 系統環境變量配置 106
8.6 啟動ZooKeeper 107
8.7 本章小結 107
第9章 Sqoop組件的安裝與配置 108
9.1 Sqoop相關知識 108
9.2 Sqoop的功能應用 109
9.2.1 Sqoop架構 109
9.2.2 Sqoop導入原理 109
9.2.3 Sqoop導出原理 110
9.3 下載和解壓Sqoop 112
9.4 配置Sqoop環境 112
9.5 啟動Sqoop 113
9.6 Sqoop模板命令 114
9.7 Sqoop組件應用 116
9.8 本章小結 117
第10章 Flume組件的安裝與配置 118
10.1 Flume相關知識 118
10.2 Flume功能應用 119
10.2.1 Flume功能 119
10.2.2 Flume結構 119
10.3 Flume組件設置 119
10.4 下載和解壓Flume 120
10.5 Flume組件部署 121
10.6 使用Flume發送和接收
信息 121
10.7 本章小結 122
第四部分 大數據平臺實施
第11章 大數據平臺實施方案的理解 125
11.1 系統實施方案概述 125
11.1.1 方案概述 125
11.1.2 項目實施思路 126
11.1.3 項目實施流程 126
11.2 確認客戶需求 127
11.2.1 確認需求分析準備 127
11.2.2 進行確認需求調研 127
11.2.3 系統詳細需求分析 129
11.3 編寫大數據平臺實施方案 129
11.3.1 大數據平臺規劃 129
11.3.2 大數據平臺部署 131
11.3.3 項目實施計劃 131
11.3.4 項目實施人員 132
11.4 執行實施方案過程 133
11.4.1 實施內容 133
11.4.2 實施流程 133
11.5 系統測試 133
11.6 項目驗收 135
11.7 本章小結 135
第12章 客戶培訓方案的制定 136
12.1 培訓方案概述 136
12.2 客戶培訓方案要點 137
12.2.1 培訓目標 137
12.2.2 培訓對象 138
12.2.3 培訓形式 139
12.2.4 培訓內容 139
12.2.5 培訓計劃 140
12.3 文檔製作工具 140
12.3.1 製作甘特圖 140
12.3.2 製作WBS圖 143
12.4 大數據平臺操作演示 145
12.4.1 演示內容選取 145
12.4.2 演示的步驟 146
12.4.3 演示的技巧 147
12.4.4 演示注意事項 148
12.5 本章小結 148
第五部分 大數據平臺監控
第13章 大數據平臺監控命令 151
13.1 大數據平臺運行狀態 151
13.1.1 大數據平臺主機系統狀態 152
13.1.2 大數據平臺Hadoop狀態 153
13.2 大數據平臺資源狀態 153
13.2.1 YARN資源狀態 154
13.2.2 HDFS資源狀態 154
13.2.3 HBase狀態 155
13.2.4 Hive狀態 155
13.3 大數據平臺服務狀態 156
13.3.1 ZooKeeper服務狀態 156
13.3.2 Sqoop服務狀態 157
13.3.3 Flume服務狀態 157
13.4 通過命令監控大數據平臺的
運行狀態 157
13.4.1 通過命令查看大數據平臺
狀態 157
13.4.2 通過命令查看Hadoop
狀態 165
13.5 通過命令監控大數據平臺的
資源狀態 166
13.5.1 通過命令查看YARN狀態 166
13.5.2 通過命令查看HDFS狀態 167
13.5.3 通過命令查看HBase狀態 168
13.5.4 通過命令查看Hive狀態 171
13.6 通過命令監控大數據平臺的
服務狀態 174
13.6.1 通過命令查看ZooKeeper
狀態 174
13.6.2 通過命令查看Sqoop狀態 178
13.6.3 通過命令查看Flume狀態 180
13.7 本章小結 181
第14章 大數據平臺監控界面和報表 182
14.1 大數據平臺常用組件 182
14.2 通過界面監控大數據平臺的
運行狀態 183
14.2.1
您曾經瀏覽過的商品
購物須知
大陸出版品因裝訂品質及貨運條件與台灣出版品落差甚大，除封面破損、內頁脫落等較嚴重的狀態，其餘商品將正常出貨。
特別提醒：部分書籍附贈之內容(如音頻mp3或影片dvd等)已無實體光碟提供，需以QR CODE 連結至當地網站註冊“並通過驗證程序”，方可下載使用。
無現貨庫存之簡體書，將向海外調貨：
海外有庫存之書籍，等候約45個工作天;
海外無庫存之書籍，平均作業時間約60個工作天，然不保證確定可調到貨，尚請見諒。
為了保護您的權益，「三民網路書店」提供會員七日商品鑑賞期(收到商品為起始日)。
若要辦理退貨，請在商品鑑賞期內寄回，且商品必須是全新狀態與完整包裝(商品、附件、發票、隨貨贈品等)否則恕不接受退貨。