爬虫
苏建康
python web开发
展开
-
爬虫-关于58同城繁体字解析
import reimport base64from io import BytesIOfrom fontTools.ttLib import TTFontimport requestsfrom lxml import etreesession = requests.session()response = session.get(url='https://bj.58.com/chu...原创 2019-03-31 20:58:18 · 631 阅读 · 0 评论 -
Scrapyd部署Scrapy爬虫
首先创建个爬虫项目,这里就不讲怎么创建爬虫项目了将项目部署到Scrapyd上面,Scrapyd是scrapinghub官方提供的爬虫管理、部署、监控的方案之一安装模块pip install scrapyd pip install scrapyd-client在端口启动scrapyd的服务:要先启动环境管理命令:scrapyd在爬虫根目录执行:scrapyd-deploy...原创 2019-05-21 19:12:44 · 328 阅读 · 0 评论