租房数据3000行

import requests
from bs4 import BeautifulSoup
from re import *
import csv


def looking(pages1):
    # 1. 获取网页数据
    response = requests.get(f'https://cd.zu.ke.com/zufang/pg{pages1}#contentList')
    '''
        https://cd.zu.ke.com/zufang/pg1#contentList
        https://cd.zu.ke.com/zufang/pg2/#contentList
        https://cd.zu.ke.com/zufang/pg3/#contentList
        '''
    # print(response.text)

    # 2. 解析网页数据
    soup = BeautifulSoup(response.text, 'lxml')
    all_house = soup.select('.content__list>.content__list--item')
    data = []
    for house in all_house:
        # 名字
        name = house.select_one('.twoline').text.strip()
        name1 = name.split()
        name2 = name1[0]
        # 价格
        price = house.select_one('.content__list--item-price').text

        # 地址-面积-户型
        p = house.select_one('.content__list--item--des')
        message = sub(r'\s+', '', p.text)
        list = message.split('/')
        location = list[-5]
        # print(location)
        area = list[-4]
        # print(area)
        model = list[-2]
        # print(model)
        data.append([name2, price, location, area, model])

    writer = csv.writer(open('files/租房.csv', "a", newline=''))
    if pages1 == 0:
        writer.writerow(['名字', '价格', '位置', '面积', '户型'])
    writer.writerows(data)

    # print(data)


for pages1 in range(100):
    looking(pages1)

import time

time.sleep(1)
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值