Java爬虫
码java的秃头阿姨
秃秃秃秃秃头r
展开
-
java爬虫-------爬取携程景点及门票数据
1.爬虫 网络爬虫简介 他的主要工作就是 跟据指定的url地址 去发送请求,获得响应, 然后解析响应 , 一方面从响应中查找出想要查找的数据,另一方面从响应中解析出新的URL路径,然后继续访问,继续解析;继续查找需要的数据和继续解析出新的URL路径 .这就是网络爬虫主要干的工作. 下面是流程图: 爬虫准备 通过上面的流程图 能大概了解到 网络爬虫 干了哪些活 ...原创 2018-08-07 19:58:52 · 3397 阅读 · 4 评论 -
java爬取携程酒店的评价信息以及eleven参数获取
本贴已经无用了,需要爬数据的可以去携程app端,未加密可以直接请求接口获取数据 下面给出一个简单的思路:访问页面https://m.ctrip.com/webapp/hotel/hoteldetail/dianping/7500321.html?&fr=detail&atime=20190510&days=1请求地址:https://m.ctrip.com/re...原创 2018-09-27 16:13:09 · 3897 阅读 · 17 评论 -
java爬取携程景点门票数据
进入携程官网查询杭州有哪些景点f12 debug可以看到请求了某个接口 得到的数据 我们需要自己分析一下这个接口 需要的参数 请求头等。我们在爬取的时候可以根据这个接口直接post请求json数据格式的景点信息简单写一下 需要更详细的可以自己研究一下。public class test { public static void main(String[] ...原创 2019-07-31 09:50:01 · 1018 阅读 · 5 评论 -
java爬取携程景点门票的评论数据信息 门票评价信息爬取
进入某一个景点页面 f12点击评论部分 点击评论的下一次可以看到请求了某个接口得到了评论数据我们在爬取的时候可以根据这个接口直接post请求json数据格式的景点评论信息简单写一下 需要更详细的可以自己研究一下。public class test2 { public static void main(String[] args) throw...原创 2019-08-01 14:28:19 · 974 阅读 · 2 评论