av一区二区在线观看_亚洲男人的天堂网站_日韩亚洲视频_在线成人免费_欧美日韩精品免费观看视频_久草视

您的位置:首頁技術(shù)文章
文章詳情頁

python爬取”頂點(diǎn)小說網(wǎng)“《純陽劍尊》的示例代碼

瀏覽:19日期:2022-07-08 09:42:02

爬取”頂點(diǎn)小說網(wǎng)“《純陽劍尊》

代碼

import requestsfrom bs4 import BeautifulSoup# 反爬headers = { ’User-Agent’: ’Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.102 Safari/537.36’}# 獲得請求def open_url(url): response = requests.get(url, headers=headers) response.encoding = response.apparent_encoding html = response.text return html# 提取標(biāo)題def get_title(url): soup = BeautifulSoup(url, ’lxml’) title_tag = soup.find(’dd’) title = ’n’ + title_tag.h1.get_text() + ’n’ return title# 提取文本def get_texts(url): soup2 = BeautifulSoup(url, ’lxml’) text_tags = soup2.find_all(’dd’, id='contents') return text_tags# 保存標(biāo)題def save_title(filename, title): with open(filename, ’a+’, encoding=’utf-8’) as file: file.write(title)# 保存文本def save_text(filename, text): with open(filename, ’a+’, encoding=’utf-8’) as file: file.write(text)# 主程序函數(shù)def main(): num = input(’《純陽劍尊》你想要下載第幾章?(1-802)’) num = int(num) number = 8184027 + num url = ’https://www.23us.so/files/article/html/15/15905/’ + str(number) + ’.html’ filename = ’純陽劍尊.txt’ r = open_url(url) title = get_title(r) tags = get_texts(r) save_title(filename, title) for text_tag in tags: text = text_tag.get_text() + ’n’ save_text(filename, text) print(’第{}章已經(jīng)下載完成!’.format(num))if __name__ == ’__main__’: main()

爬取結(jié)果:

python爬取”頂點(diǎn)小說網(wǎng)“《純陽劍尊》的示例代碼

python爬取”頂點(diǎn)小說網(wǎng)“《純陽劍尊》的示例代碼

以上就是python爬取”頂點(diǎn)小說網(wǎng)“《純陽劍尊》的示例代碼的詳細(xì)內(nèi)容,更多關(guān)于python 爬取頂點(diǎn)小說網(wǎng)的資料請關(guān)注好吧啦網(wǎng)其它相關(guān)文章!

標(biāo)簽: Python 編程
相關(guān)文章:
主站蜘蛛池模板: 国产影音先锋 | 久久久久久国模大尺度人体 | 久久69精品久久久久久久电影好 | 欧美一级淫片免费视频黄 | 亚洲综合中文字幕在线观看 | 日本黄色免费片 | 91高清在线观看 | 国产精品久久久久久久久久免费看 | 男人天堂午夜 | 国产精品乱码一区二三区小蝌蚪 | 国产午夜精品视频 | 日韩区| 久久国产精品一区二区三区 | 国产精品久久久久久久久免费高清 | 久久久婷婷| 美女午夜影院 | 国产精品美女久久久久aⅴ国产馆 | 中文字幕一区二区三区不卡在线 | 在线观看三级av | 欧美福利精品 | 国内精品视频 | 自拍偷拍亚洲视频 | 精品一区二区三区在线观看国产 | 男女网站免费观看 | 能免费看的av | 2020国产在线 | 蜜桃av人人夜夜澡人人爽 | 天堂一区在线 | 亚洲va中文字幕 | 美女一级a毛片免费观看97 | 国产www成人| 久久久久国 | 国产免费一区二区三区 | 亚洲三区视频 | 亚洲欧洲一区二区 | 黄视频免费观看 | 久久久免费毛片 | 欧美日韩久 | 久久伊人影院 | 性视频一区 | 国产欧美在线视频 |