av一区二区在线观看_亚洲男人的天堂网站_日韩亚洲视频_在线成人免费_欧美日韩精品免费观看视频_久草视

您的位置:首頁(yè)技術(shù)文章
文章詳情頁(yè)

python - 我已經(jīng)連上了美國(guó)的VPN,而且在瀏覽器里查看的game排行也是美國(guó)的,可是為啥我用代碼怎么爬都是中國(guó)地區(qū)排行

瀏覽:109日期:2022-07-27 11:12:00

問(wèn)題描述

-encoding:utf-8--import requests, xlwt, sysfrom bs4 import BeautifulSoup

reload(sys)sys.setdefaultencoding(’utf-8’)header = {’user-agent’:’Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/56.0.2924.87 Safari/537.36’,}

def main():

url = ’https://play.google.com/store/apps/category/GAME/collection/topselling_free?hl=zh-TW’data = {’start’: ’0’,’num’ : ’100’,}a = []b = []req = requests.post(url,headers = header,data = data).contentsoup = BeautifulSoup(req,’html.parser’)titles = soup.find_all(’p’,{’class’:’details’})for title in titles : name = title.find(’a’,{’class’:’title’}).get(’title’) host_url = title.find(’a’,{’class’:’title’}).get(’href’) print name , host_url a.append(name) b.append(host_url)for i in range(len(a)): sheet.write(i,0,a[i])for n in range(len(b)): sheet.write(n,1,b[n])

if name == ’__main__’:

wb = xlwt.Workbook()sheet = wb.add_sheet('top_100')main()wb.save(’gametop100.xls’)# login()

問(wèn)題解答

回答1:

服務(wù)器可以檢測(cè)請(qǐng)求最終來(lái)源,你設(shè)置了代理也不管事或者,你需要更深的代理

回答2:

你的爬蟲(chóng)沒(méi)設(shè)置代理吧

標(biāo)簽: Python 編程
主站蜘蛛池模板: 亚洲天天干| 国产成人久久精品一区二区三区 | 久久久一区二区三区四区 | 国产精品久久久久久妇女6080 | av中文在线观看 | 亚洲电影免费 | 日韩精品一区二区三区 | 欧美日韩精品久久久免费观看 | 99精品免费久久久久久日本 | 欧美黑人狂野猛交老妇 | 亚洲精品av在线 | 亚洲精品久 | 国产精品久久久久久久7电影 | 欧美中文在线 | 国产高清无av久久 | 在线成人一区 | 成人在线观看网站 | 欧美激情一区二区三级高清视频 | 精品欧美一区二区三区精品久久 | 91视频久久久久 | 欧洲成人免费视频 | 91精品久久久久久久久中文字幕 | 91久久国产综合久久91精品网站 | 久久这里只有精品首页 | 中文字幕一区二区三区不卡 | 国产99久久精品一区二区永久免费 | 日日干夜夜操天天操 | 久久精彩视频 | 久久久亚洲一区 | 日韩中文久久 | 少妇一级淫片免费放播放 | 久久亚洲欧美日韩精品专区 | 大久 | 精品视频一区二区 | 国产精品 亚洲一区 | 91青青草视频 | 久久久精| 久久久久国产精品 | 色免费视频 | 高清人人天天夜夜曰狠狠狠狠 | 婷婷丁香在线视频 |