再续抓数据经验谈--找到数据来源的方法

说一些小技巧,分享给需要在互联网上,找数据,然后接收的。

往往一个网页上面呈现的内容,来源有很多个,浏览器会根据脚本的调用,访问很多个服务器地址,所以我们要抓取数据,最好知道数据的源头, 直接从源头获取再进行解析。

比如我用的chrome浏览器,火狐也更好。

1.右击页面,从菜单中选择“审查元素”;

2.选择Network,功能栏,然后再F5,就可以看到整个页面内容的数据来源。

3.可以通过,选择文件类型分类来找到你要的数据源,看一下Response是否包含你要的内容,或者其他方法自己探索一下。

4.找到了之后,看看Header里面的RequestURL,访问一下。

5.有些涉及参数设置的检索,可以看看搜索的脚本代码,以实用url的方式去获取检索内容。


这个经验非常常用有效,分享给大家。

  • 2
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值