weixin_51776032的博客

原创 基础爬虫记~豆瓣+东方财富网爬虫

一、基础豆瓣爬虫 1、首先在某站上听讲解，简单建立起了对爬虫的基础框架，具体包括五个板块（当然 有些东西看个人 可写成函数 也可以直接写 但重复用到的东西建议写函数） 我用到了下面五个库： from bs4 import BeautifulSoup ##网页解析，获取数据 import re ##正则表达式，进行文字匹配 import urllib.request,urllib.error ##制定URL，获取网页数据 import xlwt ##进行exce