让代码更简单

当前位置:代码狗 > 资源教程 > 实用教程 > 正文

Python自动下载小说源码

百亿补贴,品牌正品,官方补贴,买贵必赔!:https://m.tb.cn/h.4C7KqyL或复制淘口令 ¥Rir2XQLxY6L¥
重要:本文最后更新于2021-03-12 19:36:52,某些文章具有时效性,若有错误或已失效,请在下方留言或联系代码狗

某位站长老是问我小说怎么用python下载,我一般都是在八零电子书下载,现成的不好吗?写程序爬不麻烦吗?有这时间还不如看看小姐姐。下面分享一个Python自动下载小说源码,由于我从不在网页看小说,这个小说站是别人提供的,与我无关。

源码如下,将其复制保存为XXX.py文件即可。

# -*- coding:UTF-8 -*-
from bs4 import BeautifulSoup
import requests
import sys
import time


class downloader(object):

    def __init__(self,url):
        self.target = url # 章节页
        self.names = [] # 存放章节名
        self.urls = [] # 存放章节链接
        self.nums = 0 # 章节数
        self.title=""#小说名

    def get_one_text(self, url_i):

        text = ' '
        url_i="https://www.nitianxieshen.com"+url_i
        r = requests.get(url=url_i)
        r.encoding = r.apparent_encoding

        html = r.text
        html_bf = BeautifulSoup(html, features='html.parser')
        texts=html_bf.find_all('p')
        texts[0].decompose()
        texts[len(texts)-1].decompose()
        for t in texts:
            text += str(t)
            text = text.replace('<None>', '')
            text = text.replace('</None>', '')
            text = text.replace('</div>', '\n')
            text = text.replace('<br/>', '\n')
            text = text.replace('<p>', '\n')
            text = text.replace('</p>', '\n')
            text = text.replace('<\p>', '\n')

    return text

def get_name_address_list(self):
    list_a_bf = []
    list_a = []
    r = requests.get(self.target)
    r.encoding = r.apparent_encoding
    html = r.text
    div_bf = BeautifulSoup(html, features='html.parser')
    self.title=div_bf.find('h1').text
    div = div_bf.find_all('div',attrs={"id":"play_0"})[0]
    li=div.find_all('li')
    self.nums=len(li)
    for i in range(len(li)):
        self.names.append(li[i].find('a').string) # string方法返回章节名
        self.urls.append(li[i].find('a').get('href')) # get(‘href’)返回子地址串
    print("共:"+str(self.nums)+"章")

def writer(self, name, path, text):
    write_flag = True
    with open(path, 'a', encoding='utf-8') as f: # 打开目标路径文件
    f.write(name + '\n')
    f.writelines(text)
    f.write('\n\n')


if __name__ == "__main__":

dl = downloader("填入小说章节列表页地址")
dl.get_name_address_list()

print('《'+dl.title+'》开始下载:')
for i in range(dl.nums):
    time.sleep(0.2)
    try:
        dl.writer(dl.names[i], r''+dl.title+'.txt', dl.get_one_text(dl.urls[i]))
    except IndexError as e:
        print(repr(e))
    sys.stdout.write(" 已下载:%.3f%%" % float((i/dl.nums)*100) + '\r'+'当前第:'+str(i)+' 章')
    sys.stdout.flush()
print(dl.title+'下载完成')

然后将其放在拥有python环境的地方,使用python xxx.py回车运行即可,效果如下:

Python自动下载小说源码

Python自动下载小说源码

注意:上面的代码使用了python扩展库,请先安装BeautifulSouprequests支持。参考代码如下:

pip install beautifulsoup4
pip install requests

如果提示没有pip工具,请先安装pip工具,参考前面的教程Centos7.X升级默认Python到3.X并安装pip3扩展管理

感觉很棒!可以赞赏支持我哟~

赞(1) 打赏

评论 抢沙发

×

请作者吃根烤肠!

支付宝