上一篇文章只是讲了爬取网站某一页的图片并保存,但是这并不会满足工作中的需要,这篇我们将学习如何爬取网页全部图片 。
其他部分的代码和上一篇的都是一样的,在上一篇代码的基础上进行了修改。
废话不多说,直接上代码:
import requests
from bs4 import BeautifulSoup
def download_png(page):
cookies = {
}
headers = {
}
params = ('page', str(page))
response = requests.get('https://github.com/topics', headers