yz7zzxj001的博客

原创 爬取某市房管局房屋交易备案公开数据

需求：爬取指定网页上的房屋交易备案公开数据 需求分析： 1.目标网站中的数据地址不发生改变，不需要写params 2.目标网站没有反爬虫机制，也没有robots.txt协议，更无cookie验证，甚至不需要写请求头，但服务器响应时间较长。 3.该网站代码书写较为规范，从源码注释里看粗来像直接复制的模板。 # -*- coding: utf-8 -*- """ Created on Sun Sep ...