jsoup爬取
jsoup只适用于爬取静态网页,爬取动态网页时往往获取不到数据,此时不想使用其他框架可参照以下自创方法获取:
1.打开先要爬取的页面按f12用定位光标将elements内容全部展开,复制elements中的全部内容
2.打开eclipse创建一个动态web项目并创建一个html文件
3.将复制的elements中的内容粘贴在html中并运行
4.jsoup爬取本地运行tomcat网址就可以按照正常网页爬取步骤进行爬取
注:此方法只适用于暂时不太熟悉爬虫框架并且少量爬取工程,如有精力还是要好好深入学习爬虫,如有用处请给博主点个赞