python爬虫之链家郑州二手房爬取

最新推荐文章于 2024-08-13 21:38:27 发布

warm...

最新推荐文章于 2024-08-13 21:38:27 发布

阅读量1.1k

点赞数

分类专栏： Python爬虫文章标签： python

本文链接：https://blog.csdn.net/qq_46292926/article/details/105051053

版权

本文介绍使用Python爬虫抓取链家网站上郑州二手房的初步信息，通过分析URL和HTML文本，直接从列表页获取数据，并将结果存储为CSV文件。

摘要由CSDN通过智能技术生成

今天爬取链家郑州二手房的信息，先写简单一点的，通过链家的过滤标签，共筛选出5家符合条件的房源，只爬取了列表页的内容，后面在爬取稍微复杂一点的页面。
首先分析url及返回的html文本，发现所要的信息就在当前url返回的html文本当中，这就非常简单了。
在这里插入图片描述
返回的html文本

既然这样，那提取内容就十分的简单了。
这篇比较简单，就不做过多的阐述了，完整代码如下：

'''
爬取链家二手房信息
类的使用
'''
# 导入第三方库
import requests
import time
import csv
from lxml import etree
from fake_useragent import UserAgent

# 随机请求头
ua = UserAgent()


# 定义链家的类
class LianJia():
    # 初始化对象
    def __init__(self)