温馨提示:报错了就百分之九十九是网址需要手动验证,就请移步去点击验证啦!(这里用了csv跟xsxl两种保存方式,任选其一即可!)
# -*- coding: utf-8 -*- """ Created on Tue Oct 27 18:27:21 2020 @author: Yuka 利用Lxml库,爬取前10页的信息,具体信息如下: 进入每个房源的页面,爬取小区名称、房屋类型、房屋朝向、参考月供和核心卖点,把它们存储到CSV文件中。 """ from lxml import etree import requests import time import re import csv import xlwt lst = [['小区名称','房屋类型','房屋朝向','参考价格','核心卖点']] headers = { "user-agent": "Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/85.0.4183.83 Safari/537.36" } def get_url(url): res = requests.get(url=url,header