av一区二区在线观看_亚洲男人的天堂网站_日韩亚洲视频_在线成人免费_欧美日韩精品免费观看视频_久草视

您的位置:首頁(yè)技術(shù)文章
文章詳情頁(yè)

python - 我已經(jīng)連上了美國(guó)的VPN,而且在瀏覽器里查看的game排行也是美國(guó)的,可是為啥我用代碼怎么爬都是中國(guó)地區(qū)排行

瀏覽:109日期:2022-07-27 11:12:00

問(wèn)題描述

-encoding:utf-8--import requests, xlwt, sysfrom bs4 import BeautifulSoup

reload(sys)sys.setdefaultencoding(’utf-8’)header = {’user-agent’:’Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/56.0.2924.87 Safari/537.36’,}

def main():

url = ’https://play.google.com/store/apps/category/GAME/collection/topselling_free?hl=zh-TW’data = {’start’: ’0’,’num’ : ’100’,}a = []b = []req = requests.post(url,headers = header,data = data).contentsoup = BeautifulSoup(req,’html.parser’)titles = soup.find_all(’p’,{’class’:’details’})for title in titles : name = title.find(’a’,{’class’:’title’}).get(’title’) host_url = title.find(’a’,{’class’:’title’}).get(’href’) print name , host_url a.append(name) b.append(host_url)for i in range(len(a)): sheet.write(i,0,a[i])for n in range(len(b)): sheet.write(n,1,b[n])

if name == ’__main__’:

wb = xlwt.Workbook()sheet = wb.add_sheet('top_100')main()wb.save(’gametop100.xls’)# login()

問(wèn)題解答

回答1:

服務(wù)器可以檢測(cè)請(qǐng)求最終來(lái)源,你設(shè)置了代理也不管事或者,你需要更深的代理

回答2:

你的爬蟲(chóng)沒(méi)設(shè)置代理吧

標(biāo)簽: Python 編程
主站蜘蛛池模板: 最新国产精品视频 | 日日夜夜天天久久 | 亚洲精品丝袜日韩 | 久久精品a级毛片 | 欧美激情在线精品一区二区三区 | 希岛爱理在线 | 福利视频网站 | 国产视频欧美 | 99热视 | 欧美成人精品一区二区男人看 | 国产精品一区久久久 | 亚洲三级国产 | 欧美成人aaa级毛片在线视频 | 亚洲一区中文字幕 | 成人一区二区在线 | 中文字幕成人av | 久久久久久中文字幕 | 成人在线播放 | 久久91精品国产一区二区三区 | 精品1区2区3区4区 | 99精品国产一区二区三区 | 精品亚洲一区二区三区四区五区 | 久久亚洲天堂 | 国产视频久久久久 | 精品1区2区3区 | 无码一区二区三区视频 | 激情国产| 国产一区二区三区在线 | 日韩小视频 | 亚洲vs天堂 | 久久亚洲一区二区三区四区 | 草草视频在线播放 | 国产激情在线 | 久久精品视频免费观看 | 狠狠艹| 欧美一区二区三区大片 | 毛片视频网站 | 国产精品成人一区二区 | 中文字幕免费视频 | 亚洲色在线视频 | 日韩视频在线免费观看 |