Spark大數據技術與應用（簡體書）

《Spark大數據技術與應用/大數據專業應用型人才培養規劃教材》共分為10章，第1～8章闡述了spark核心組件的用法，以及使用相應組件進行大數據分析應用的方法，通過綜合性實踐案例將理論和實踐相結合；第9～10章通過兩個綜合實例讓讀者從理論階段上升到實際應用層面，可以幫助讀者更深入理解Spark的使用方法。

《Spark大數據技術與應用/大數據專業應用型人才培養規劃教材》作為大數據分析與內存計算的入門教材，希望能夠幫助讀者打開大數據分析與應用的大門。《Spark大數據技術與應用/大數據專業應用型人才培養規劃教材》採用理論結合實踐的方式，循序漸進地介紹了Spark的運行原理，並引入綜合性的實踐案例，以引導讀者運用所學知識解決現實中的問題。

第1章 Spark簡介與運行原理

1．1 Spark是什麼

1．2 Spark的生態系統

1．3 Spark的架構與原理

1．4 Spark 2．X新特性



第2章 Spark的環境搭建

2．1 環境搭建前的準備

2．2 Spark相關配置

2．3 Spark集群啟動與關閉

2．4 Spark應用提交到集群

2．5 Spark Web監控頁面



第3章 開發Spark應用

3．1 Java編程語言

3．2 Scala編程語言

3．3 R編程語言

3．4 Python編程語言

3．5 PySpark的啟動與日誌設置

3．6 PySpark開發包的安裝

3．7 使用PyCharm編寫Spark應用



第4章 Spark RDD

4．1 彈性分布式數據集

4．2 transform算子

4．3 action算子

4．4 RDD Key――Value轉換算子

4．5 RDD Key――Value動作運算

4．6 共享變量

4．7 依賴關係

4．8 Spark RDD的持久化



第5章 DataFrame與Spark SQL

5．1 DataFrame

5．2 Spark SQL

5．3 Spark SQL、DataFrame的常用操作



第6章 Spark Streaming

6．1 Spark Streaming介紹

6．2 流數據加載

6．3 DStream轉換操作

6．4 DStream輸出操作

6．5 DataFrame與SQL操作

6．6 實時WordCount實驗



第7章 Spark機器學習庫

7．1 Spark機器學習庫

7．2 準備數據

7．3 使用ML機器學習庫



第8章 GraphFrames圖計算

8．1 圖

8．2 GraphFrames介紹

8．3 GraphFrame編程模型

8．4 GraphFrames實現的算法

8．5 基於GraphFrames的網頁排名



第9章 出租車數據分析

9．1 數據處理

9．2 數據分析

9．3 百度地圖可視化



第10章 圖書推薦系統

10．1 Django簡介

10．2 Django項目搭建

10．3 推薦引擎設計

10．4 系統設計與實現

參考文獻