利用云服务器我们可以玩好多的技术,前面的我给大家分享的大多与网站和一些服务有关,今天我给大家分享有关云主机Python3环境安装PySpider爬虫框架过程
本文讲解云主机上PySpider爬虫框架的安装。
关于服务器配置
更多参阅:服务器规格文档
安装流程
pip
首先确保你已经安装了pip,若没有安装,请参照此文
phantomjs
PhantomJS 是一个基于 WebKit 的服务器端 JavaScript API。它全面支持web而不需浏览器支持,其快速、原生支持各种Web标准:DOM 处理、CSS 选择器、JSON、Canvas 和 SVG。 PhantomJS 可以用于页面自动化、网络监测、网页截屏以及×××面测试等。
安装方式
以上附有官方安装方式,如果你是 Ubuntu,还可以使用如下命令:
sudo apt-get install phantomjs
pyspider
直接运行pip安装即可
pip install pyspider
测试
安装完成之后,如果没有任何的报错,那就OK
命令行输入
pyspider all
然后浏览器访问 http://localhost:5000
观察一下效果,如果可以正常出现 PySpider 的页面,那证明一切OK
在此附图一张,这是写了几个爬虫之后的界面。
云计算作为新基建的基础设施,在2020年疫情期间的高效应用,得到了很多企业的认可,企业业务上云成为2020年企业选择基础设施的首选。
面对众多的云平台,个人和企业该如何选择呢?我们回归正题,现在哪家的云服务器性价比最高呢?
可以看看这篇文档:【云服务器推荐】2021年腾讯云、阿里云、华为云服务器价格和配置评测