爬虫
java爬虫分享
懒惰虫儿
说走就走,说停就停,说做就做,拿得起放得下,人生是一场修行!
展开
-
Java爬虫(四)通过屏幕录制顺序实现目标输入和点击
Java制控制鼠标键盘通过屏幕录制顺序实现输入和点击,用awt包下的Robot实现,awt提供了鼠标事件和键盘事件,我们通过鼠标事件mouseMove()并点击锁定光标位置(这个用录屏实现),然后通过键盘事件KeyEvent()输入需要的内容。键盘输入工具类如下先给大家展示下效果第一步:启动项目弹出提示框,我们需要手动打开浏览器跳转到拼多多登录页面第二步:根据提示录屏,将鼠标悬停到目标...原创 2019-06-27 11:23:34 · 1505 阅读 · 0 评论 -
Java爬虫(三)后台发请求获取页面解析数据
一 、发请求获取网页内容import org.springframework.web.bind.annotation.GetMapping;import org.springframework.web.bind.annotation.RestController;import java.io.*;import java.net.HttpURLConnection;import java....原创 2019-05-24 18:04:53 · 4666 阅读 · 2 评论 -
Java爬虫(二)找到被模拟点击按钮的一些技巧
Java爬虫在获取最新页面信息时,难免会用到模拟点击某些按钮来刷新页面,然后获取到页面信息,简单的情况就不说了,说说笔者最近做的一些爬虫时遇到的问题和解决方案吧,估计这些你们都用得到。一、建设银行爬虫-爬取收款信息问题:当IE驱动拉起建设银行登录页面我们登录后需要跳转到交易明细,这时问题来了。模拟点击明细时,建设银行官网弹出了个新的窗口,那么怎么获取新窗口上面的html页面呢?解决方案:...原创 2019-05-20 14:15:04 · 3896 阅读 · 0 评论 -
java爬虫(一)用selenium驱动IE和谷歌浏览器模拟点击网页
我们公司的需求总是那么折磨人,最近要做模拟人一步步点击拼多多商品发起支付然后得到最后一步的链接。那么之前学的selenium就派上用场了,在本篇博客我将带大家学会Java爬虫的第一步,用selenium模拟人点击一个个的标签,得到我们想要的网页或者链接。一、Springboot整合selenium1.驱动IE浏览器1.1准备工作 下载ie浏览器驱动,IEDriverServer的版本号和Se...原创 2019-05-09 10:27:38 · 3457 阅读 · 0 评论