![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫
白日梦想嘉
热爱的心,是日不落的国。
展开
-
爬取国家统计局区划代码(多进程版)
现在奉上多进程版本from multiprocessing.pool import Poolfrom bs4 import BeautifulSoupimport pandas as pdimport requestsimport timeimport osheaders = { 'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) ..原创 2020-09-18 08:43:43 · 616 阅读 · 0 评论 -
爬取国家统计局区域划分代码及名称
from bs4 import BeautifulSoupimport pandas as pd import requestsheaders = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/83.0.4103.116 Safari/537.36'}获取一级代码、名称、下一级链接通过设置参数originUrl来调整爬...原创 2020-09-17 11:39:51 · 724 阅读 · 0 评论