文章詳情頁
python3.x - python發送get請求是否可以只獲取狀態碼而不下載頁面內容
瀏覽:118日期:2022-09-15 11:42:03
問題描述
如題描述因為一些需求想對一份url列表進行get請求掃描,看看這些頁面是否存在平時用的requests模塊的get和多進程來實現,感覺還是不夠快.于是產生了如題描述的這種想法.順便問下,為什么vps提供商會封我...好郁悶.
問題解答
回答1:heads=requests.head(url)
回答2:平時用的requests模塊的get和多進程來實現,感覺還是不夠快.于是產生了如題描述的這種想法.
取決于多種原因,你丟棄 GET 的響應體并不一定會更快。
如果 HEAD 滿足你的要求,你就用 HEAD 吧。
記得使用 requests.Session,這樣對同一服務器的訪問可以加速一倍以上。
PS: 建議好好學習一下 HTTP,這樣遇到問題你就不需要來問然后等著,最后拿到一個自己都不明白的解決方案。
相關文章:
1. 請教使用PDO連接MSSQL數據庫插入是亂碼問題?2. node.js - nodejs開發中常用的連接mysql的庫3. Python爬蟲如何爬取span和span中間的內容并分別存入字典里?4. mysql - 分庫分表、分區、讀寫分離 這些都是用在什么場景下 ,會帶來哪些效率或者其他方面的好處5. 視頻文件不能播放,怎么辦?6. python - 數據與循環次數對應不上7. mysql - 把一個表中的數據count更新到另一個表里?8. 黑客 - Python模塊安全權限9. flask - python web中如何共享登錄狀態?10. mysql 查詢身份證號字段值有效的數據
排行榜
