![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫
文章平均质量分 91
奇怪的程序猿
求人不如求己,与其临渊羡鱼,不如退而结网!
展开
-
JSOUP 抓取县以上行政代码划分并导出json文件
JSOUP 抓取县以上行政代码划分并导出json文件由于在一次工作中需要用到这个 ,网上找的大都是2017年的,所以就自己写了一个抓取,并把它转成一个json文件来自用代码首先需要一个jsoup ,我用的是maven结构的项目,所以引入jsoup及其他一些需要的jar包 <dependency> <groupId>org.jsoup</groupId...原创 2018-12-07 19:59:55 · 390 阅读 · 0 评论 -
打造一个属于自己的ip代理工具 ProxyRoot
起源:前段时间,应一个朋友的委托,想在高考前搞一份往年各大高校对不同地区的文理科分数线,搞一个查询分数的公众号,在爬取网站的数据时由于对网站的请求太频繁,在访问了2000多次后被网站把我的ip 封了,于是就起了自己打造一款ip代理工具的心思。准备工作最近使用idea 比较多,所有新开启一个springboot 项目,引入redis 存储IP地址,找到一个提供ip代理的网站找找他们对外提供...原创 2019-08-02 15:34:11 · 2795 阅读 · 0 评论