webMagic
aiotto资源分享
:-D
展开
-
webMagic 代理池
package com.example.csdn.bean;import org.apache.log4j.Logger;import org.jsoup.Jsoup;import org.jsoup.nodes.Document;import org.jsoup.select.Elements;import us.codecraft.webmagic.Page;import us....原创 2020-03-13 21:53:37 · 3429 阅读 · 0 评论 -
使用 webMagic 注解爬取网页数据
不久前使用 webMagic开发了一款爬虫爬取对象为四川政务网,使用JFinal持久化数据如果你正在学习爬虫,或者业务与我类似,那么你可以下载源码学习也可向我提出改进意见参考源码:在这里列表页:http://www.sczwfw.gov.cn/app/index?flag=2&areaCode=510000000000抓取页:http://www.sczwf...原创 2020-01-08 17:19:17 · 2554 阅读 · 2 评论