python写爬虫之【概览:爬到的数据是啥样】

本文介绍了使用Python的Selenium与PhantomJS爬取北邮招生网页数据的案例,数据以.xls格式存储,每个文件包含多个省份的招生详情。内容涵盖数据结构和爬取方法,提供进一步的数据处理与分析参考。
摘要由CSDN通过智能技术生成

前记:

刚刚试了一下,尽管Selenium对PhantomJS的支持已经被deprecated(弃用,藐视,抨击)。

但是,我还是可以用此方法爬取数据。先简单讲解一下我之前写的一个小程序,回头再探索最新的爬虫框架。

 

我写的这个程序功能是这样的:爬取北邮人招生网页上,各年份中北邮在不同省份各个专业的招生人数,对应的最高分,最低分和平均分。

爬下来的数据格式是.xls。

每一个.xls是保存的某一个年份里(如2018年,待会也用2018年做实例)n个省份的招生情况,即有n个sheet。

每一个是sheet里是北邮在该省的具体招生情况,如下:

以上是我们爬得的rawdata。

具体的爬取过程,可以参照:

如何分析网页并使用python爬取网页数据

想要挖掘出这些数据的信息,可以参照:

使用Python处理csv数据的常规做法

更多学习资料,请关注下面的公众号:不定期分享

    • 0
      点赞
    • 3
      收藏
      觉得还不错? 一键收藏
    • 0
      评论
    评论
    添加红包

    请填写红包祝福语或标题

    红包个数最小为10个

    红包金额最低5元

    当前余额3.43前往充值 >
    需支付:10.00
    成就一亿技术人!
    领取后你会自动成为博主和红包主的粉丝 规则
    hope_wisdom
    发出的红包
    实付
    使用余额支付
    点击重新获取
    扫码支付
    钱包余额 0

    抵扣说明:

    1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
    2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

    余额充值