爬取安居客租房信息，主要是获取电话号码

最新推荐文章于 2022-04-24 16:31:04 发布
最新推荐文章于 2022-04-24 16:31:04 发布
阅读量5.7k 收藏 8
点赞数 2
分类专栏： python 文章标签： 爬虫 python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_40522828/article/details/88418358
版权
本文介绍了如何爬取安居客网站上的经纪人房源电话号码。针对电话号码不直接加载的情况，通过分析请求URL和参数，发现可以在页面源代码中获取所需信息。使用requests库进行会话保持是成功请求电话号码的关键。此外，文章还提到了在调试模式下解决安居客的debugger问题的方法。
摘要由CSDN通过智能技术生成

爬取安居客租房信息，主要是获取电话号码

想要得到个人房源的电话只能在app上获取，而且获取的是虚拟号码，没什么作用。所以我们这次获取的是经纪人房源的电话号码，随便打开一个网页，可以看到。
在这里插入图片描述
他的电话号码是不会直接加载出来的，需要你点击，这就有两种方法，一种是用selenium来爬取，每次都模拟人的点击，但这样性能会比较低。我们打开调试面板点击来看他的url是怎样的
现在安居客在你打开调试面板再点击查看电话会出现不断debugger
在这里插入图片描述
我们把这个在调试面板右上方按钮开启就可以解决了，这是用来筛选小白的。
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
可以看到这个url就是返回我们所需的电话号码，再看一下它的请求参数，发现这些在页

最低0.47元/天 解锁文章
CrazyBuLLo
关注
专栏目录
Python爬虫实战（3）：安居客房产经纪人信息采集
一起学习Python网络爬虫
07-11 4098
本实战是上图中的“独立python爬虫”的一个实例，以采集安居客房产经纪人信息为例，记录整个采集流程，包括python和依赖库的安装，即便是python初学者，也可以跟着文章内容成功地完成运行。
爬取手机号
最新发布
qq_55279568的博客
05-31 558
链接地址：例如：https://haoma.baidu.com/phoneSearch?爬取前的excel表格（自己建立数据）
python爬虫代码房-Python爬虫实战（3）：安居客房产经纪人信息采集
weixin_37988176的博客
11-01 256
1， 引言Python开源网络爬虫项目启动之初，我们就把网络爬虫分成两类：即时爬虫和收割式网络爬虫。为了使用各种应用场景，该项目的整个网络爬虫产品线包含了四类产品，如下图所示：本实战是上图中的“独立python爬虫”的一个实例，以采集安居客房产经纪人(http://shenzhen.anjuke.com/tycoon/nanshan/p1/ )信息为例，记录整个采集流程，包括python和依赖库的...
前嗅ForeSpider采集教程：采集安居客列表数据
u011231755的博客
01-11 2943
通过【链接列表】采集网站中的【正文数据】 案例：安居客二手房列表页链接，加翻页 安居客http://www.ifeng.com 一.网站内容 1.网站截图说明 本教程以采集“二手房”列表页链接内的正文数据为例，故链接入口应该为“二手房”板块的网址（https://tianjin.anjuke.com/sale/?from=navigation） Step1：点击官网，找到“...
Python爬取安居客房产经纪人信息
人生苦短， 还不用Python？
03-27 1150
引言 Python开源网络爬虫项目启动之初，我们就把网络爬虫分成两类：即时爬虫和收割式网络爬虫。为了使用各种应用场景，该项目的整个网络爬虫产品线包含了四类产品，如下图所示： Python和相关依赖库的安装 运行环境：Windows10+ Python3 Lxml 3.6.0 网络爬虫的源代码 from urllib import request from lxml import...
python写爬虫4-多线程爬虫(采集58出租房信息)_python爬虫 爬取58同城上所有城市的租房信息详解...
weixin_39817215的博客
11-26 857
代码如下from fake_useragent import UserAgentfrom lxml import etreeimport requests, osimport time, re, datetimeimport base64, json, pymysqlfrom fontTools.ttLib import TTFontua = UserAgent()class CustomExce...
安居客房源信息获取
Z_suger7的博客
04-24 845
最近身边有几个做房产销售的朋友经常在诉苦，找不到客户，没有业绩，所以就比较好奇他们现在的行情，所以今天我们就使用python获取下安居客的一些房源数据。之前分享过很多关于爬虫的实践示例，今天这个也算是实践内容。我们就以户型结构、装修情况、水肥情况进行房源数据获取。 爬取数据的通用流程：1、根据url请求页面，获取页面响应对象2、将页面响应对象转化为对象 3、定位要爬取的数据 4、获取数据。 在上代码之前先和大家交流下网站的反爬。像这样的网站反爬都是比较严的，所以基本的反爬措施也是需要做好的，其中最重要的是代
Python爬虫整站爬取安居客新房房源数据
weixin_44530636的博客
07-09 4918
对安居客新房房源进行整站爬取，全国所有城市的新房数据。 获取数据字段也主要集中在第一个页面，并未进行二层页面的挖掘 在持续爬取过程中，会出现验证码的过程，不过它的验证码还是比较友好的， 只需要在浏览器拖动图片就行，代码又能重新运行了。整个爬取过程中我只 拖动了两次。所以安居客是算非常友好的网站了，当然上述问题也可以使用代理IP 解决。接下来还可以做的，加上代理IP，加上多线程，进行二级页面的进一步...
Python3爬虫编程学习笔记（五）实战：爬取安居客房屋信息之 XPath学习
流浪的虎哥的博客
03-28 1673
爬取到网页源代码，并不是目的，爬虫的最终目的是采集到我们想要的数据，那么就必须进行数据提取。一般来说是利用Python自带的正则表达式re模块进行提取。XPath语法可用来在XML和HTML文档中对标签元素和属性进行遍历。所以在做爬虫时，完全可以使用XPath 来进行相应的信息提取。
58同城App接口数据电话解密（个人研究学习用）
11-28
58同城App接口数据电话解密，控制台程序，AES，个人学习研究用
安居客出租房（武汉为例）爬虫+数据分析+可视化
06-22
爬取安居客上的出租房信息（武汉地区的），并通过爬取的数据进行数据清洗以及数据分析。给出四个不同层面的可视化图。最终结果如下图所示： ![Image text]...
Python爬取安居客新房信息
B4ToB的博客
11-04 6538
Python爬虫 + 抓取安居客房产信息
爬取安居客上的优质业务员信息
wyd117的博客
10-28 380
coding=utf-8 import urllib2 import urllib import re f = open(‘D:/python1/renwu.txt’,“a”,) from bs4 import BeautifulSoup for i in range(1,5): url = ‘https://beijing.anjuke.com/tycoon/p’+str(i)+’/’ user...
python爬取安居客（BeautifulSoup）
castingA3T的博客
01-20 6390
# -*- coding: utf-8 -*- """ Created on Fri Dec 15 10:26:06 2017 @author: Administrator """ import requests from bs4 import BeautifulSoup import time headers={ 'User-Agent':'Mozilla/5.0 (Wind
php爬取安居客小区数据
gjwphper
06-12 3433
php爬取安居客小区数据
python3爬虫-通过requests获取安居客房屋信息
weixin_34128534的博客
05-04 477
import requests from fake_useragent import UserAgent from lxml import etree from http import cookiejar import re, time import pymysql import random from requests.exceptions import Timeout ...
以58同城为例详解如何用爬虫采集二手房房源数据及中介联系方式
weixin_34402090的博客
11-29 3656
2019独角兽企业重金招聘Python工程师标准>>> ...
爬虫破解安居客等网址信息字体加密
paul0926的博客
07-19 5507
爬虫破解安居客等网址信息字体加密
python爬取安居客郑州租房信息
06-02
可以使用Python中的requests和BeautifulSoup库来爬取安居客郑州租房信息。 以下是一个简单的示例代码： ```python import requests from bs4 import BeautifulSoup url = 'https://zz.zu.anjuke.com/fangyuan/p1/' headers = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.3'} response = requests.get(url, headers=headers) soup = BeautifulSoup(response.text, 'html.parser') house_list = soup.select('.zu-itemmod') for house in house_list: title = house.select('.zu-info > h3 > a')[0].text.strip() price = house.select('.zu-side > p > strong')[0].text.strip() print(title, price) ``` 代码中，我们首先定义了待爬取的页面URL，并设置了请求头headers。然后使用requests库发起GET请求，并将相应的HTML页面文本传递给BeautifulSoup库进行解析。最后，我们使用CSS选择器从解析后的HTML文档中提取出租房信息的标题和价格，并打印输出。 需要注意的是，上述代码仅仅爬取了第一页的信息。如果需要爬取更多页面的信息，需要修改URL并修改循环的范围。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值