爬虫项目--爬取安居客二手房信息

爬虫实战(爬取安居客二手房信息-成都天府新区)

环境:python3.6 pycharm bs4库
解析方式:bs4

需求:爬取二手房信息字段(titile,house_type,build_time,area,address,price,unit_price),并将爬取到的数据导出到excel表格中,当然你也可直接存到数据库。

第一步 分析url:

第一页的url如下
在这里插入图片描述
第二页的url:
在这里插入图片描述
发现url变化很简单,只需要将第几页{p?} 传递进去就可以获得相应的链接

第二步:分析源代码,并选择合适的解析方式。

由于只爬取成都地区的二手房信息,所以比较简单 ,来到这个页面后,拿到源代码:
在这里插入图片描述
可以看到每一页的二手房信息都展示在源代码中,并且用li标签分别写入了每一个房屋的信息,我们所需要的字段信息也都在其中。

第三步: 开始爬取
上我写的代码࿰

  • 8
    点赞
  • 45
    收藏
    觉得还不错? 一键收藏
  • 5
    评论
评论 5
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值