java爬虫面试题_java爬虫练习|webmagic爬取前程无忧职位信息

java爬虫学习webmagic爬取前程无忧职位信息遇到的一些问题记录一下

1.使用爬取页面跑出"TLSv1.3"不支持异常

由于webmagic作者长期没有发布0.74版本，所以只能手动解决

下载webmagic-core源码，去除"TLSv1.3"，在忽视测试在install，即可爬取页面

2.问题如下

3.因为之前用的1.7的编译版本，改成1.8导致idea 版本报错：Error:java: Compilation failed: internal java compiler error 解决办法

报错原因：

项目中Java版本不一致，可以查看项目中的jdk配置

1、查看项目的jdk(Ctrl+Alt+shift+S)

File ->Project Structure->Project Settings ->Project

2、查看工程的jdk(Ctrl+Alt+shift+S)

File ->Project Structure->Project Settings