- 博客(5)
- 资源 (1)
- 问答 (1)
- 收藏
- 关注
RSS订阅原创 python Scrapy爬虫—使用scarpy shell调试
1、进入对应的虚拟环境2、命令scrapy shell 网站域名接下来就可以进行对应的字段解析（使用xpath或者css）
2018-03-30 23:51:55
234
原创 python css选择器学习
# -*- coding: utf-8 -*-import scrapyimport reclass JobboleSpider(scrapy.Spider): name = 'jobbole' allowed_domains = ['blog.jobbole.com'] start_urls = ['http://blog.jobbole.com/110287/...
2018-03-24 00:08:33
1295
原创 Python xpath学习
1、xpath使用路径表达式在xml和html中进行导航2、xpath包含标准函数库3、xpath是一个w3c的标准xpath节点关系1、父节点2、子节点3、同袍节点4、先辈节点5、后代节点xpath语法article 选取所有article元素的所有子节点/article 选取根元素articlearticle/a ...
2018-03-22 01:42:17
266
原创 pycharm调试scrapy执行步骤
1、命令：workon article_spider后去到D盘主目录2、命令：scrapy startproject ArticleSpider3、命令：scrapy genspider jobbole blog.jobbole.com （win系统下需要pip install -i https://pypi.douban.com/simple pypiwin32）4、导入ArticleSpi...
2018-03-22 00:20:57
1233
原创 win10下python虚拟环境的安装和配置
环境：win10，python3.6(已安装，配置好)，python2.7（已安装） 1、在cmd中运行pip install virtualenv （pip.exe在python3.6的安装子目录Scripts里面，将其添加进环境变量里就行了） 附录：利用豆瓣源安装django：pip install -i https://pypi.douban.com/simple/ djang...
2018-03-20 00:53:41
8807
香橙派2g iot板子的安卓系统修改开机画面
2017-09-16
TA创建的收藏夹 TA关注的收藏夹
TA关注的人