問題描述

本人快大二了，自習(xí)了Python，語法基本會(huì)。想學(xué)下爬蟲，但是感覺這涉及到好多知識啊，有沒有過來人總結(jié)下都有什么知識，或者Python爬蟲該怎么學(xué)？

問題解答

爬蟲學(xué)習(xí)要從需求學(xué)習(xí)，你看網(wǎng)上那么多初級爬蟲都是爬些什么段子，美女圖什么的，三天就能搞定這些簡單的爬蟲。

但是深入的話就是很難的，涉及到的方面也很多。

入門不是什么難事，可以看下這個(gè)--如何學(xué)習(xí)Python爬蟲[入門篇] https://zhuanlan.zhihu.com/p/...

原理上就是http請求,再多一點(diǎn)就是session和cookie，再多就是驗(yàn)證碼識別。工具上就是請求工具可以用urllib2，更好是request庫，請求過來需要解析，那就是beautifulsoup。

Python 基礎(chǔ)教程 | 菜鳥教程 http://www.runoob.com/python/...

Beautiful Soup 4.2.0 文檔 — Beautiful Soup 4.2.0 documentation https://www.crummy.com/softwa...

爬蟲性能：NodeJs VS Python - QueenKing - SegmentFault /a/11...

用KNN來進(jìn)行驗(yàn)證碼識別 - QueenKing - SegmentFault /a/11...

可以參考 Python-Scrapy 爬蟲框架，這有中文手冊。