python爬取网页不全_python爬虫系列简单静态网页爬取1

不点蓝字，我们哪来故事？

本篇文章讲述python爬虫如何爬取静态网页内容。 思路：

• 通过requests库获取网页内容

• 通过其他库解析网页来提取所需要的内容

• 保存

我们以笔趣阁小说章节url为例

首先分步实现

• 获取网页内容

import requestsurl = 'http://www.biquge.info/10_10582/'source_page = requests.get(url).content.decode('utf-8')#使用requests中的get方法获取网页内容

• 解析网页，本篇通过xpath来解析