Beautiful JavaScript

本書從實戰角度系統論述了Python 爬蟲技術的核心知識，並通過大量的真實項目幫助讀者深入掌握Python 爬蟲技術及其實現。本書提供了大量實戰案例，演繹採用各種技術編寫Python 爬蟲的方式。讀者可以任意組合使用這些技術，完成非常複雜的爬蟲應用。本書共20 章，分為五篇。第一篇：基礎知識(第1～2 章)，主要包括Python 編程環境的搭建、IDE 的安裝和使用、HTTP 的基礎知識、網頁基礎(HTML、CSS、JavaScript)、爬蟲的基本原理、Session、Cookie。第二篇：網絡庫(第3～5 章)，主要包括網絡庫urllib、urllib3 和requests 的核心使用方法，例如，發送HTTP 請求、處理超時、設置HTTP 請求頭、處理中文字符、搭建和使用代理、解析鏈接、Robots 協議等。第三篇：解析庫(第6～9 章)，主要包括3 個常用解析庫(lxml、Beautiful Soup 和pyquery)的使用方法，同時介紹了多種用於分析HTML 代碼的技術，例如，正則表達式、XPath、CSS 選擇器、方法選擇器等。第四篇：數據存儲(第10～11 章)，主要包括Python 中數據存儲的解決方案，如文件存儲和SQLite 數據庫。第五篇：爬蟲高級應用(第12～20 章)，主要包括Python 爬蟲的一些高級技術，如抓取異步數據、Selenium、Splash、抓取移動App 數據、Appium、多線程爬蟲、爬蟲框架Scrapy、通過OpenCV 技術識別驗證碼；最後給出一個綜合的實戰案例，該案例綜合了Python 爬蟲、數據存儲、PyQt、多線程、數據可視化、Web 等多種技術實現一個可視化爬蟲。

本書從實戰角度系統講解 Python爬蟲的核心知識點，並通過大量的真實項目讓讀者熟練掌握 Python爬蟲技術。本書用 20多個實戰案例，完美演繹了使用各種技術編寫 Python爬蟲的方式，讀者可以任意組合這些技術，完成非常複雜的爬蟲應用。全書共 20章，分為 5篇。第 1篇基礎知識（第 1、2章），主要包括 Python運行環境的搭建、 HTTP基礎、網頁基礎（ HTML、CSS、JavaScript等）、爬蟲的基本原理、 Session與 Cookie。第 2篇網絡庫（第 3～ 6章），主要包括網絡庫 urllib、urllib3、requests和 Twisted的核心使用方法，如發送 HTTP請求、處理超時、設置 HTTP請求頭、搭建和使用代理、解析鏈接、 Robots協議等。第 3篇解析庫（第 7～ 10章），主要包括 3個常用解析庫（ lxml、Beautiful Soup和 pyquery）的使用方法，同時介紹多種用於分析 HTML代碼的技術，如正則表達式、 XPath、CSS選擇器、方法選擇器等。第 4篇數據存儲（第 11、12章），主要包括 Python中數據存儲的解決方案，如文件存儲和數據庫存儲，其中數據庫存儲包括多種數據庫，如本地數據庫 SQLite、網絡數據庫 MySQL以及文檔數據庫 MongoDB。第 5篇爬蟲高級應用（第 13～ 20章），主要包括 Python爬蟲的一些高級技術，如抓取異步數據、 Selenium、Splash、抓取移動 App數據、 Appium、多線程爬蟲、爬蟲框架 Scrapy，最後給出一個綜合的實戰案例，綜合了 Python爬蟲、數據存儲、 PyQt5、多線程、數據可視化、Web等多種技術實現一個可視化爬蟲。本書可以作為廣大計算機軟件技術開發者、互聯網技術研究人員學習“爬蟲技術”的參考用書。也可以作為高等院校計算機科學與技術、軟件工程、人工智能等專業的教學參考用書。