今天来分享一下pyppeteer的安装,这玩意儿第一次用,楞是装了两天也没有使用成功,自己也按照网上的教程按部就班也没有装上。pyppeteer优点就不说了,直接说一下自己的遇到的问题吧。
pyppeteer的安装
安装之前打开cmd把 websockets (pip uninstall websockets #卸载websockets)卸载掉是因为很有可能是最新版本的,不卸载后续会出问题。然后pip install websockets==6.0 #指定安装6.0版本然后(pip install pyppeteer -i http://pypi.douban.com/simple--trusted-host http://pypi.douban.com),加上豆瓣的下载滤镜会快很多,接下来可以pyppeteer-install安装chromium,pyppeteer模块是依赖chromium这款谷歌测试版的浏览器的,但是我个人不建议直接pyppeteer-install安装chromiun,因为速度是真的慢而且时不时会自动断开
建议直接下载安装包放到pyppeteer相应的路径下,下面是各系统的chromium压缩包下载地址:
'linux': 'https://storage.googleapis.com/chromium-browser-snapshots/Linux_x64/575458/chrome-linux.zip'
'mac': 'https://storage.googleapis.com/chromium-browser-snapshots/Mac/575458/chrome-mac.zip'
'win32': 'https://storage.googleapis.com/chromium-browser-snapshots/Win/575458/chrome-win32.zip'
'win64': 'https://storage.googleapis.com/chromium-browser-snapshots/Win_x64/575458/chrome-win32.zip'
然后,将压缩包放到pyppeteer的指定目录下解压缩,windows系统的默认目录(可能你会找不到Local文件夹,因为隐藏了,直接点一下查看然后勾上隐藏的项目就可以看到了)。其他系统下的默认目录可以参照下面这幅图如果能正确安装上那就完事儿了:
4
把压缩包放进去后,在CMD中再次pyppeteer-install出现下面这样的话就没有问题了:
pyppeteer的使用
爬取百度首页并截取图片保存,代码:
import asyncio
from pyppeteer import launch
async def main():
#开启一个浏览器,里面的参数{'headless':False}不写的话就会默认不跳出浏览器页面
browser = await launch({'headless':False})
page = await browser.newPage()
#打开一个网址
await page.goto('http://baidu.com')
#截取一张图片
await page.screenshot({'path': 'baidu.png'})
await browser.close()
asyncio.get_event_loop().run_until_complete(main())
基本使用:
1.headless(bool):是否在无头模式下运行浏览器。默认为 True除非 appMode或 devtools选项 True
2.pyppeteer.browser.Browser() 这个类是由launch()返回的实例
3.coroutine close(): 关闭此页面
4.button(str):,left,right或middle,默认为 left。
5.clickCount (int):默认为1。
6.delay(int | float):等待时间mousedown和 mouseup以毫秒为单位的时间。默认为0。