av一区二区在线观看_亚洲男人的天堂网站_日韩亚洲视频_在线成人免费_欧美日韩精品免费观看视频_久草视

您的位置:首頁技術文章
文章詳情頁

python - 我已經連上了美國的VPN,而且在瀏覽器里查看的game排行也是美國的,可是為啥我用代碼怎么爬都是中國地區排行

瀏覽:123日期:2022-07-27 11:12:00

問題描述

-encoding:utf-8--import requests, xlwt, sysfrom bs4 import BeautifulSoup

reload(sys)sys.setdefaultencoding(’utf-8’)header = {’user-agent’:’Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/56.0.2924.87 Safari/537.36’,}

def main():

url = ’https://play.google.com/store/apps/category/GAME/collection/topselling_free?hl=zh-TW’data = {’start’: ’0’,’num’ : ’100’,}a = []b = []req = requests.post(url,headers = header,data = data).contentsoup = BeautifulSoup(req,’html.parser’)titles = soup.find_all(’p’,{’class’:’details’})for title in titles : name = title.find(’a’,{’class’:’title’}).get(’title’) host_url = title.find(’a’,{’class’:’title’}).get(’href’) print name , host_url a.append(name) b.append(host_url)for i in range(len(a)): sheet.write(i,0,a[i])for n in range(len(b)): sheet.write(n,1,b[n])

if name == ’__main__’:

wb = xlwt.Workbook()sheet = wb.add_sheet('top_100')main()wb.save(’gametop100.xls’)# login()

問題解答

回答1:

服務器可以檢測請求最終來源,你設置了代理也不管事或者,你需要更深的代理

回答2:

你的爬蟲沒設置代理吧

標簽: Python 編程
主站蜘蛛池模板: 91毛片网| 国产精品久久视频 | 欧美精品在线免费 | 中文字幕 在线观看 | 精品三区 | 亚洲日本欧美 | 国产91丝袜在线播放 | 欧美一区二区三区国产精品 | 性一区 | 美女三区| 很黄很污的网站 | 国产美女黄色 | 精品日韩欧美一区二区 | 精品日韩| 欧美色a v| 国产在线精品一区二区 | 欧美日韩视频网站 | 国产精品无码久久久久 | 国产一区二区三区在线看 | 精品视频999 | 亚洲国产成人在线视频 | 久草热播 | 午夜久久av | 日韩欧美字幕 | 亚洲综合五月天婷婷 | 91素人| 久久99精品国产自在现线小黄鸭 | 欧美精品一区二区三区视频 | 九九亚洲 | 福利视频网址 | 中文字幕精品一区二区三区精品 | 国产精品海角社区在线观看 | 国产精品a久久久久 | 精品www| 国产精品久久久久久久三级 | 黄视频网站免费观看 | hsck成人网| 欧洲妇女成人淫片aaa视频 | www午夜视频 | 欧美中文一区 | 色眯眯视频在线观看 |