爬虫
蜗牛乌龟一起走
程序和女朋友有一个能跑就行了
展开
-
HttpClient4+Jsoup实现Java爬虫
最近看了看java爬虫相关资料,于是想自己做一个Demo试试,测试爬去http://www.youdaili.net/Daili/QQ/36817.html该页面的全部数据,包括分页数据。多的不说,直接上代码。package com.dairuijie.Util;import org.apache.http.HttpHost;import org.apache.http.NameValuePa...原创 2018-05-13 23:44:46 · 357 阅读 · 0 评论 -
爬虫之爬
java 爬虫基础首先了解java 如何爬取数据,解析数据。可以参考https://mp.csdn.net/postedit/80304129 我是基于这个开发。我的需求需要获取公司电话、 地址、公司纳税识别号、公司注册地址这个几个属性。分析爬天眼查难点1、需要登录?答:没有登录 直接爬取获取的是登录页面HTML 所以需要自己去先网页登录获取登录的cookies 信息 ,也可以自己写一...原创 2018-11-25 22:13:58 · 3338 阅读 · 0 评论