- 博客(4)
- 收藏
- 关注
RSS订阅原创 scrapy框架
scrapy框架简介Scrapy是用纯Python实现一个为了爬取网站数据、提取结构性数据而编写的应用框架，用途非常广泛框架的力量，用户只需要定制开发几个模块就可以轻松的实现一个爬虫，用来抓取网页内容以及各种图片，非常之方便其流程可以描述如下：爬虫中起始的url构造成request对象–>爬虫中间件–>引擎–>调度器调度器把request–>引擎–>下载中...
2020-04-15 21:32:04
807
原创 Linux 常用命令
目录操作mkdir 创建目录mkdir -p 递归的创建目录 也就是可以创建多层目录mkdir {a,b,c,d,e,f} 一次创建多个目录rmdir 删除一个空文件夹cp 复制文件或者文件夹cp -p 同时复制文件属性，比如修改日期cp -d 复制时保留文件链接cp -r 复制文件夹时，递归复制字文件夹mv 移动文件或者文件夹，可在移动的时候重命名rm 删除文件或者文件夹...
2020-04-10 19:05:41
639
原创 RabbitMQ 知识总结
一、为什么使用 MQ?好的架构不是设计出来的，是演进出来的，使用 MQ 必定有其道理，是用来解决实际问题的。其实使用 MQ 的场景挺多的，但是比较核心的有 3 个：异步、解耦、削峰填谷。二、MQ 优缺点1、系统可用性降低大家想象一下，上面的说解耦的场景，本来 A 系统的哥们要把系统关键数据发送给 BC 系统的，现在突然加入了一个 MQ 了，现在 BC 系统接收数据要通过 MQ 来接收。但是...
2020-04-08 23:38:49
149
原创 python基础知识点总结
Python标识符在 Python 里，标识符有字母、数字、下划线组成。在 Python 中，所有标识符可以包括英文、数字以及下划线(_)，但不能以数字开头。Python 中的标识符是区分大小写的。以下划线开头的标识符是有特殊意义的。以单下划线开头 _foo 的代表不能直接访问的类属性，需通过类提供的接口进行访问，不能用 from xxx import * 而导入；以双下划线开头的 __...
2020-04-07 22:59:40
776
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人