文章詳情頁
關于python爬蟲的問題
瀏覽:94日期:2022-07-26 11:13:25
問題描述
我使用post爬取網頁表格數據,網站如下http://www.ipe.org.cn/Industr...,現在遇到了2個問題,其中一個問題是違規類型中<input type='checkbox' name='violation' data-role='all' checked='' value='0'>,該網頁已經設定了checked,已經有默認值,而我只想要violation=1的數據,不知道該怎么辦第二個問題是在選擇國家,省份,城市過程<select name='select' onchange='setProvince_0();'>我無法直接用name 以及value選擇我想要的表單數據
跪求各位大神的解答
問題解答
回答1:他是有API用來返回數據的,你可以抓取一下,點擊篩選之后的數據流。大概是這個api,http://www.ipe.org.cn/data_as...,post方式,里面有一個參數叫itemType就是你想要的違規類型。然后對應的國家,省份,城市等信息都在api中有體現,自己跟一下就知道了。然后根據需求,構造請求你需要的數據,剩下的就是解析了。。。。
相關文章:
1. javascript - 在ie下為什么會出現這種情況呢 《 無法獲取未定義或 null 引用的屬性“length”》 ?請大神指教。2. css右浮動字的順序顛倒了3. javascript - 我是做web前端的,公司最近有一個項目關于數據統計的!4. html5和Flash對抗是什么情況?5. javascript - 只是想用node建立一個簡單的服務器6. MySQL主鍵沖突時的更新操作和替換操作在功能上有什么差別(如圖)7. javascript - vue過渡效果 css過渡 類名的先后順序8. javascript - vuejs+elementui 購物車價格計算,點擊加減號修改數量總價都不會改變,但是計算執行了9. 數據庫 - Mysql的存儲過程真的是個坑!求助下面的存儲過程哪里錯啦,實在是找不到哪里的問題了。10. javascript - 如何使用loadash對[object,object,object]形式的數組進行比較
排行榜
