Android 本地网络小说爬虫,基于 jsoup 及 xpath,目前最稳定和高效的UI适配方案

模版示例


例如针对猎文网:

{

“id”: 1, //对应书源 id

“search”: { //搜索页解析规则

“charset”: “UTF-8”,

“xpath”: “//div[@class=‘result-item result-game-item’]”,

“coverXpath”: “//div[@class=‘result-game-item-pic’]//a//img/@src”,

“titleXpath”: “//div[@class=‘result-game-item-detail’]//h3//a/@title”,

“linkXpath”: “//div[@class=‘result-game-item-detail’]//h3//a/@href”,

“authorXpath”: “//div[@class=‘result-game-item-detail’]//div[@class=‘result-game-item-info’]//p[1]/span[2]/text()”,

“descXpath”: “//div[@class=‘result-game-item-detail’]//p[@class=‘result-game-item-desc’]/text()”

},

“catalog”: { //目录列表解析规则

“xpath”: “//div[@id=list]//dl//dd”,

“titleXpath”: “//a/text()”,

“linkXpath”: “//a/@href”

},

“content”: { //文章内容解析规则

“xpath”: “//div[@id=‘content’]/text()”

}

}

调用方式


目前虽然请求结果是通过 Callback 形式,因为搜多个源是分批返回结果。内部当仍是同步请求,没有做线程调度。

Crawler.search(“你好”, new SearchCallback() {

@Override

public void onResponse(String keyword, List appendList) {

}

@Override

public void onFinish() {

}

@Override

public void onError(String msg) {

}

});

Crawler.catalog(new SearchBook.SL(“https://www.liewen.cc/b/24/24934/”, SourceManager.SOURCES.get(1)), new ChapterCallback() {

@Override

public void onResponse(List chapters) {

}

@Override

public void onError(String msg) {

}

});

Crawler.content(new SearchBook.SL(“https://www.liewen.cc/b/24/24934/”, SourceManager.SOURCES.get(1)), “/b/24/24934/12212511.html”, new ContentCallback() {

@Override

public void onResponse(String content) {

}

@Override

public void onError(String msg) {

自我介绍一下,小编13年上海交大毕业,曾经在小公司待过,也去过华为、OPPO等大厂,18年进入阿里一直到现在。

深知大多数初中级安卓工程师,想要提升技能,往往是自己摸索成长,但自己不成体系的自学效果低效又漫长,而且极易碰到天花板技术停滞不前!

因此收集整理了一份《2024年最新Android移动开发全套学习资料》送给大家,初衷也很简单,就是希望能够帮助到想自学提升又不知道该从何学起的朋友,同时减轻大家的负担。
img
img
img
img

由于文件比较大,这里只是将部分目录截图出来,每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频
如果你觉得这些内容对你有帮助,可以添加下面V无偿领取!(备注Android)
img

最后

这里附上上述的技术体系图相关的几十套腾讯、头条、阿里、美团等公司2021年的面试题,把技术点整理成了视频和PDF(实际上比预期多花了不少精力),包含知识脉络 + 诸多细节,由于篇幅有限,这里以图片的形式给大家展示一部分。

相信它会给大家带来很多收获:

img

上述高清技术脑图以及配套的架构技术PDF可以点击我的GitHub免费获取

当程序员容易,当一个优秀的程序员是需要不断学习的,从初级程序员到高级程序员,从初级架构师到资深架构师,或者走向管理,从技术经理到技术总监,每个阶段都需要掌握不同的能力。早早确定自己的职业方向,才能在工作和能力提升中甩开同龄人。

  • 无论你现在水平怎么样一定要 持续学习 没有鸡汤,别人看起来的毫不费力,其实费了很大力,这四个字就是我的建议!!!
  • 我希望每一个努力生活的IT工程师,都会得到自己想要的,因为我们很辛苦,我们应得的。

当我们在抱怨环境,抱怨怀才不遇的时候,没有别的原因,一定是你做的还不够好!

己的职业方向,才能在工作和能力提升中甩开同龄人。

  • 无论你现在水平怎么样一定要 持续学习 没有鸡汤,别人看起来的毫不费力,其实费了很大力,这四个字就是我的建议!!!
  • 我希望每一个努力生活的IT工程师,都会得到自己想要的,因为我们很辛苦,我们应得的。

当我们在抱怨环境,抱怨怀才不遇的时候,没有别的原因,一定是你做的还不够好!

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值