![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫学习笔记
蒋奕伟
这个作者很懒,什么都没留下…
展开
-
Java爬虫 学习记录4
设置配置请求信息 public class HttpConfigTest { public static void main(String[] args) { //创建httpclient对象 CloseableHttpClient httpClient = HttpClients.createDefault(); //创建httpget对象, 设置url访问地址 HttpGet httpGet = new HttpGet("https原创 2021-06-29 17:02:29 · 108 阅读 · 0 评论 -
Java爬虫 学习笔记 3
创建连接池,从连接池里获取HttpClient对象 public class HttpClientPoolTest { public static void main(String[] args) { //1.创建连接池管理器 PoolingHttpClientConnectionManager cm = new PoolingHttpClientConnectionManager(); //连接数和主机最大连接数可以理解为:一共分配100个连接 主机原创 2021-06-29 17:00:45 · 106 阅读 · 0 评论 -
Java 爬虫学习笔记 2
1.Get方式带参数传递 public class HttpGetParamTest { public static void main(String[] args) throws URISyntaxException { //创建httpclient对象 CloseableHttpClient httpClient = HttpClients.createDefault(); //设置请求地址是:https://www.ziroom.com/z/r1原创 2021-06-29 16:57:17 · 284 阅读 · 0 评论 -
Java爬虫 学习记录1
Java爬虫 学习记录1 1.pom依赖: 2.编写test代码: 这里是以自如网站为例子 package cn.kgc.crawel.test; import org.apache.http.HttpEntity; import org.apache.http.client.methods.CloseableHttpResponse; import org.apache.http.client.methods.HttpGet; import org.apache.http.impl.client.Cl原创 2021-06-20 18:01:14 · 124 阅读 · 0 评论