工具
文章平均质量分 89
zry963
GitHub:https://github.com/zry963
展开
-
Intellij IDEA 使用技巧一
文章转自:http://blog.csdn.net/wfp458113181wfp/article/details/24579781 前言 个人之前一直用eclipse做c++、java开发,换到新公司,大家都用IDEA开发工具,所以最近也在学习,总结下个人心得。 1、文本编辑 删除 ctr + y 复制 ctr + D 2、智能提示转载 2016-04-15 16:06:18 · 285 阅读 · 0 评论 -
HtmlUnit--java网络爬虫
HtmlUnit // 创建一个浏览器,构造方法可以传入浏览器版本,这里我传入谷歌浏览器。 // 还可以选择火狐和IE浏览器等 BrowserVersion.XXX 常量 WebClient webClient = new WebClient(BrowserVersion.CHROME); // 为了加快页面访问速度,禁用脚本和样式(这种极速版页面,不需要js参与)原创 2016-06-30 19:40:28 · 1852 阅读 · 0 评论 -
解决htmlunit的webclient对象在多线程环境下的共享问题
解决htmlunit的webclient对象在多线程环境下的共享问题 今天在网上看到一个问题,问HtmlUnit在多线程环境下怎么使用才能避免网页抓取失败的问题。下面结合自己的使用经验,浅谈该问题的解决办法。 导致这个问题的原因其实蛮简单,举个例子来说,A线程正在使用一个WebClient对象抓取网页,在整个抓取流程结束之前,当前线程被CPU挂起,因此线程B被激活,然后B使用正在被A使转载 2016-07-14 17:38:00 · 1168 阅读 · 0 评论