Java学习路径——Java爬虫实战(1.4综合实战1:Jsoup爬取博客)
Ps:以下内容,为个人在华为官网学习 华为云开发者学堂 时学习心得与笔记 ,分享我遇到的问题或解决办法,仅供参考使用。
今天继续分享一下我在学习华为云开发者学堂时的心得体会,在跟着视频做项目的时候,如果是2022年左右之后,的小伙伴应该会跟我碰到同样的问题,就是在根据视频2综合实战1:Jsoup爬取博客编写完BlogUtil类后,在Main类中进行测试的时候,会一直报错误(空指针的错误),根据控制台报出的错误可以知道是BlogUtil类中
Element countElement = doc.select("span.count").first();
String articleCount = countElement.text();
最后一行代码的问题(why articleCount cloud be null)类似的错误
解决的办法也很简单:
首先分析原因,视频中老师在进行项目的时候,csdn的华为开发者论坛的前端页面结构并没有发生改变,在我排错的过程中发现了这个问题,还有访问的目标网址,也就是Constants类中的也要 更新为如下代码:
public static final String BLOG_HOME = "https://blog.csdn.net/weixin_44708240?type=blog";
然后是第二处要修改的地方,也就是前面提到过的前端页面发生了变化,所以要修改为:
//前端页面的标签由之前的span.count替换为代码中的名称
Element countElement = doc.select("div.user-profile-statistics-num").first();
String articleCount = countElement.text();
return articleCount;
修改后,就可以得到结果了,下面附上我的运行结果,希望可以帮到遇到一样问题的小伙伴。