pyquery
pyquery 是 python 中的一个第三方库,目前博主也在研究当中,最近发现用 pyquery 实现爬虫的方法会简单得多,下面就对 pyquery 的使用进行一些简单的演示。
前面有一篇文章 —— 通过正则表达式进行网站图片的获取。本次实验的目的是使用 pyquery 进行网站图片的爬取并进行方法对比。
pyquery 实战开始:
from pyquery import PyQuery as pq
import requests
# 导入pyquery模块里的PyQuery方法 这个方法可以解析文件内容
# 这里还是需要使用requests的方法来获取网站的数据
url = "https://www.sanchuangedu.cn"
ret = requests.get(url)
if ret.status_code == 200:
ht = ret.text
pq_html = pq(ht, parser="html")
# parser 是需要解析什么类型的文件
# pic = pq_html("img").attr("src")
# print(pic)
pic = pq_html("img").items()
# 获取html文中中的img标签(img标签也就是图片的标签内容,会获取到图片的数据)
for temp in pic:
print(temp.attr("src"))
# 这里是输出img标签里的src元素 src元素就是图片的存储路径
运行结果为:
再使用 通过正则表达式进行网站图片的获取 这篇文章后面的图片下载方法就可以达到下载图片的目的啦!
这个模块非常的简单好用噢!