python小说爬虫工具,小说搜索下载软件附源码


看小说的朋友们一定要试试哦,很方便,直接下载小说,连小说网站都不用打开

同时也把python的源码也放上了,懂的可以自己添加源网站

5.15更新

加了一个换源,功能是实现了但是代码冗余,抽取基类做继承的话就增加耦合,后续有时间再更新代码吧(市面上那些追更小说一下子几十上百的换源是怎么实现的?????)

给小说爬取加了超时抛出异常,毕竟不是每个源都是那么稳定

搜索换成线程,因为发现搜索结果较大的时候界面又卡住了.

细节修改,增加代码健壮性

5.13更新:
更新了一下软件,把遗留问题解决一下,并看看后续还有啥能更新的解决的问题

解决开始下载之后会出现无响应

弹窗太烦去掉了,改成一个console看进度

目前尝试过程中发现不用太担心反爬,重试机制最终还是会下载完所有章节,尝试过1800+章节小说下载不到1分钟

后续修改目标

尝试增加换源功能

目前由于下载保存的都是utf8导致整合文件过大,后续尝试使用gbk

5.12版本:
1. 使用python的asyncio,爬取的速度挺快
2. 整理了一下页面的格式,放到手机上看还是不错的
3. 由于爬取速度过快,可能会爬取失败,内部加了重试逻辑,只要最后能生成txt应该就是全部章节
4. 自助搜索功能

免责声明:本站资料来自公域网络收集整理,如内容侵犯请联系客服删除!

资源库【www.3pc.cn】资源下载管家力争做万能资源网,含软件,APP,源码,模版,课程,图片,影视,游戏,素材,教学,PPT等专业资源,免去用户全网搜索过程意在减少无用功提高生产力!

联系我们 订单查询