這次給大家?guī)淼氖?strong>4 幅思維導(dǎo)圖,，梳理了 Python 爬蟲部分核心知識點(diǎn)：網(wǎng)絡(luò)基礎(chǔ)知識,，Requests，BeautifulSoup,，urllib 和 Scrapy 爬蟲框架,。

爬蟲是一個非常有趣的主題，本文正是通過爬蟲完成了課題所需數(shù)據(jù)的原始積累,。第一次抓到數(shù)據(jù)時,，感覺世界都明亮了呢~

當(dāng)然，由于日常項(xiàng)目要求不高,，本文思維導(dǎo)圖僅僅涉及了爬蟲最核心基礎(chǔ)的部分,，但足夠應(yīng)對入門所需了~

P.S.由于平臺對圖片有一定程度的壓縮，建議文末下載高清原圖,，放大后閱讀,。

制圖工具：XMind

思維導(dǎo)圖

1、爬蟲基礎(chǔ)知識

2,、Requests 庫

3,、BeautifulSoup & urllib

4、Scrapy 爬蟲框架

如果你希望進(jìn)一步學(xué)習(xí)表單提交,，JS 處理,，驗(yàn)證碼等更高階的話題,，可以繼續(xù)深入學(xué)習(xí)本文附上的參考資料哦：

《Python 網(wǎng)絡(luò)數(shù)據(jù)采集》

本書采用簡潔強(qiáng)大的Python語言，介紹了網(wǎng)絡(luò)數(shù)據(jù)采集,，并為采集新式網(wǎng)絡(luò)中的各種數(shù)據(jù)類型提供了全面的指導(dǎo),。第一部分重點(diǎn)介紹網(wǎng)絡(luò)數(shù)據(jù)采集的基本原理：如何用Python從網(wǎng)絡(luò)服務(wù)器請求信息，如何對服務(wù)器的響應(yīng)進(jìn)行基本處理,，以及如何以自動化手段與網(wǎng)站進(jìn)行交互。第二部分介紹如何用網(wǎng)絡(luò)爬蟲測試網(wǎng)站,，自動化處理,，以及如何通過更多的方式接入網(wǎng)絡(luò)。