Python 3.0最简单的爬虫

最新推荐文章于 2024-08-17 20:45:04 发布

乃鱼

最新推荐文章于 2024-08-17 20:45:04 发布

阅读量5.7k

点赞数 2

分类专栏： Python笔记文章标签： python 爬虫

本文链接：https://blog.csdn.net/wws563/article/details/51547280

版权

博主分享了一个小项目，通过编写Python 3.0的爬虫来提升动手能力。由于Python 3.0与2.0的差异，博主对原有的2.0版本爬虫代码进行了调整和修改，最终成功运行。

摘要由CSDN通过智能技术生成

做个小项目练练手，比较有动力继续下去，这边参考最简单的爬虫程序自己抄了一下。但是因为3.0的关系，无法直接使用，根据2.0版本的代码进行修改后成功了。

这里写图片描述

代码如下：

# -*- coding: utf-8 -*-
# 网上抄来的最简单的爬虫，用于批量下载图片

import urllib.request
import re

#该函数用于获取html内容
#使用到urlopen的函数
def getHtml(url):
    page = urllib.request.urlopen(url)
    #3.0直接使用read()函数会出现报错，提示是编码有问题。在后面加上编码就ok了。
    html = page.read().decode("utf-8")