分分钟避坑抓取 安居客 住房信息，并存储到CSV跟XlSX中

 

温馨提示：报错了就百分之九十九是网址需要手动验证，就请移步去点击验证啦！（这里用了csv跟xsxl两种保存方式，任选其一即可！）

# -*- coding: utf-8 -*-
"""
Created on Tue Oct 27 18:27:21 2020

@author: Yuka

利用Lxml库，爬取前10页的信息，具体信息如下：
进入每个房源的页面，爬取小区名称、房屋类型、房屋朝向、参考月供和核心卖点，把它们存储到CSV文件中。
"""
from lxml import etree
import requests
import time
import re
import csv
import xlwt

lst = [['小区名称','房屋类型','房屋朝向','参考价格','核心卖点']]
headers = {
    "user-agent": "Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/85.0.4183.83 Safari/537.36"
    }

def get_url(url):
    res = requests.get(url=url,header