文章詳情頁
網頁爬蟲 - Python爬蟲入門知識
瀏覽：163日期：2022-06-26 18:12:12
問題描述
本人快大二了，自習了Python，語法基本會。想學下爬蟲，但是感覺這涉及到好多知識啊，有沒有過來人總結下都有什么知識，或者Python爬蟲該怎么學？
問題解答
回答1：爬蟲學習要從需求學習，你看網上那么多初級爬蟲都是爬些什么段子，美女圖什么的，三天就能搞定這些簡單的爬蟲。
但是深入的話就是很難的，涉及到的方面也很多。
入門不是什么難事，可以看下這個--如何學習Python爬蟲[入門篇] https://zhuanlan.zhihu.com/p/...
回答2：原理上就是http請求,再多一點就是session和cookie，再多就是驗證碼識別。工具上就是請求工具可以用urllib2，更好是request庫，請求過來需要解析，那就是beautifulsoup。
Python 基礎教程 | 菜鳥教程 http://www.runoob.com/python/...
Beautiful Soup 4.2.0 文檔 — Beautiful Soup 4.2.0 documentation https://www.crummy.com/softwa...
爬蟲性能：NodeJs VS Python - QueenKing - SegmentFault /a/11...
用KNN來進行驗證碼識別 - QueenKing - SegmentFault /a/11...
回答3：可以參考 Python-Scrapy 爬蟲框架，這有中文手冊。
相關文章：
1. mysql - 分庫分表、分區、讀寫分離 這些都是用在什么場景下 ，會帶來哪些效率或者其他方面的好處2. mysql - 這個數據庫合計用 視圖做,和直接算好存在數據庫里,到時候調用起來哪個快?3. python - 在django內如何讓后臺增加的文章自動加上是哪個用戶編輯的呢？4. centos7 編譯安裝 Python 3.5.1 失敗5. 如何修改phpstudy的phpmyadmin放到其他地方6. python - beautifulsoup獲取網頁內容的問題7. 人工智能 - python 機器學習 醫療數據 怎么學8. 關于Mysql聯合查詢9. pip安裝提示Twisted錯誤問題（Python3.6.4安裝Twisted錯誤）10. c++ - 請問MySQL_Connection::isReadOnly 怎么解決？
排行榜
網公網安備