python
JunJunTech
just do it
展开
-
常见python库环境搭建
常见python库环境搭建1.下载python3.7去python官网下载安装,选择add path to *,在cmd里面输入python,显示python控制台则成功。2、安装pip参见清华开源 https://mirrors.tuna.tsinghua.edu.cn/help/pypi/2.1临时使用pip install -i https://pypi.tuna.tsingh...原创 2019-09-10 20:54:15 · 244 阅读 · 0 评论 -
scrapy爬虫折腾系列-02
Scrapy折腾系列-021、笔记response是一个scrapy.http.response.html.HtmlResponse对象,可执行xpath和css语法来提取数据提取出来的数据,是一个 Selector或者是一个selectorList对象,要想获取其中的字符串,得执行getall或者get方法getall方法:获取selector中的所有文本,返回的是一个列表get方法...原创 2019-09-19 15:27:54 · 635 阅读 · 0 评论 -
scrapy爬虫折腾系列-01
scrapy爬虫折腾1、scrapy爬虫入门scrapy是框架,好比一辆车子,beautifulsoup好比一个轮子,所以我们只要会开车就行了采用的是异步框架 基于Twisted,实现高效率的网络采集最强大的爬虫框架2、scrapy安装pip install scrapy*可能会出现错误–>vc++14.0 Twisted 解决方法:离线安装pip instal...原创 2019-09-19 15:30:03 · 1744 阅读 · 0 评论