Android 本地网络小说爬虫,基于 jsoup 及 xpath

项目地址:smuyyh/CrawlerForReader 

简介:Android 本地网络小说爬虫,基于 jsoup 及 xpath

更多:作者   提 Bug

标签:

Android 本地网络小说爬虫,基于 jsoup 与 xpath,通过模版解析网页。

支持书源


/**

  • 所有书源

*/

public static final SparseArray SOURCES = new SparseArray() {

{

put(SourceID.LIEWEN, new Source(SourceID.LIEWEN, “猎文网”, “https://www.liewen.cc/search.php?keyword=%s”));

put(SourceID.CHINESE81, new Source(SourceID.CHINESE81, “八一中文网”, “https://www.zwdu.com/search.php?keyword=%s”));

put(SourceID.ZHUISHU, new Source(SourceID.ZHUISHU, “追书网”, “https://www.zhuishu.tw/search.aspx?keyword=%s”));

put(SourceID.BIQUG, new Source(SourceID.BIQUG, “笔趣阁”, “http://zhannei.baidu.com/cse/search?s=1393206249994657467&q=%s”));

put(SourceID.WENXUEMI, new Source(SourceID.WENXUEMI, “文学迷”, “http://www.wenxuemi.com/search.php?keyword=%s”));

put(SourceID.CHINESEXIAOSHUO, new Source(SourceID.CHINESEXIAOSHUO, “小说中文网”, “http://www.xszww.com/s.php?ie=gbk&s=10385337132858012269&q=%s”));

put(SourceID.DINGDIAN, new Source(SourceID.DINGDIAN, “顶点小说”, “http://zhannei.baidu.com/cse/search?s=1682272515249779940&q=%s”));

put(SourceID.BIQUGER, new Source(SourceID.BIQUGER, “笔趣阁 2”, “http://zhannei.baidu.com/cse/search?s=7928441616248544648&ie=utf-8&q=%s”));

put(SourceID.CHINESEZHUOBI, new Source(SourceID.CHINESEZHUOBI, “着笔中文网”, “http://www.zbzw.com/s.php?ie=utf-8&s=4619765769851182557&q=%s”));

put(SourceID.DASHUBAO, new Source(SourceID.DASHUBAO, “大书包”, “http://zn.dashubao.net/cse/search?s=9410583021346449776&entry=1&ie=utf-8&q=%s”));

put(SourceID.CHINESEWUZHOU, new Source(SourceID.CHINESEWUZHOU, “梧州中文台”, “http://www.gxwztv.com/search.htm?keyword=%s”));

put(SourceID.UCSHUMENG, new Source(SourceID.UCSHUMENG, “UC 书盟”, “http://www.uctxt.com/modules/article/search.php?searchkey=%s”, 4));

put(SourceID.QUANXIAOSHUO, new Source(SourceID.QUANXIAOSHUO, “全小说”, “http://qxs.la/s_%s”));

put(SourceID.YANMOXUAN, new Source(SourceID.YANMOXUAN, “衍墨轩”, “http://www.ymoxuan.com/search.htm?keyword=%s”));

put(SourceID.AIQIWENXUE, new Source(SourceID.AIQIWENXUE, “爱奇文学”, “http://m.i7wx.com/?m=book/search&keyword=%s”));

put(SourceID.QIANQIANXIAOSHUO, new Source(SourceID.QIANQIANXIAOSHUO, “千千小说”, “http://www.xqqxs.com/modules/article/search.php?searchkey=%s”, 4));

put(SourceID.PIAOTIANWENXUE, new Source(SourceID.PIAOTIANWENXUE, “飘天文学网”, “http://www.piaotian.com/modules/article/search.php?searchtype=articlename&searchkey=%s”));

put(SourceID.SUIMENGXIAOSHUO, new Source(SourceID.SUIMENGXIAOSHUO, “随梦小说网”, “http://m.suimeng.la/modules/article/search.php?searchkey=%s”, 4));

put(SourceID.DAJIADUSHUYUAN, new Source(SourceID.DAJIADUSHUYUAN, “大家读书苑”, “http://www.dajiadu.net/modules/article/searchab.php?searchkey=%s”));

put(SourceID.SHUQIBA, new Source(SourceID.SHUQIBA, “书旗吧”, “http://www.shuqiba.com/modules/article/search.php?searchkey=%s”, 4));

put(SourceID.XIAOSHUO52, new Source(SourceID.XIAOSHUO52, “小说 52”, “http://m.xs52.com/search.php?searchkey=%s”));

}

};

模版示例


例如针对猎文网:

{

自我介绍一下,小编13年上海交大毕业,曾经在小公司待过,也去过华为、OPPO等大厂,18年进入阿里一直到现在。

深知大多数Python工程师,想要提升技能,往往是自己摸索成长或者是报班学习,但对于培训机构动则几千的学费,着实压力不小。自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!

因此收集整理了一份《2024年Python开发全套学习资料》,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友,同时减轻大家的负担。
img
img



既有适合小白学习的零基础资料,也有适合3年以上经验的小伙伴深入学习提升的进阶课程,基本涵盖了95%以上Python开发知识点,真正体系化!

由于文件比较大,这里只是将部分目录大纲截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频,并且后续会持续更新

如果你觉得这些内容对你有帮助,可以添加V获取:vip1024c (备注Python)
img

最后

不知道你们用的什么环境,我一般都是用的Python3.6环境和pycharm解释器,没有软件,或者没有资料,没人解答问题,都可以免费领取(包括今天的代码),过几天我还会做个视频教程出来,有需要也可以领取~

给大家准备的学习资料包括但不限于:

Python 环境、pycharm编辑器/永久激活/翻译插件

python 零基础视频教程

Python 界面开发实战教程

Python 爬虫实战教程

Python 数据分析实战教程

python 游戏开发实战教程

Python 电子书100本

Python 学习路线规划

一个人可以走的很快,但一群人才能走的更远。不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎扫码加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!
img

FFF,t_70)

一个人可以走的很快,但一群人才能走的更远。不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人,都欢迎扫码加入我们的的圈子(技术交流、学习资源、职场吐槽、大厂内推、面试辅导),让我们一起学习成长!
[外链图片转存中…(img-mdPmcY4r-1712501123575)]

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值