2017年08月_longshuo1995

转载 windows 自动更新关闭

话不多说参看这篇百度经验把~~ 查看如何关闭windows的强制更新

2017-08-22 15:57:40 272

原创 fiddler手机抓包

1.fiddler配置 tools–》options–》Connections–》配置代理端口号，选中，Allow remote computer 打勾选上。tools–》options–》HTTPS–》选择抓取模式 from remote client only 2.手机和电脑位于同一个局域网网段中，配置手机的代理服务器IP和端口号，3.安装证书（不安装证书，https的请求响应发送不了

2017-08-22 08:37:38 401

原创 git的使用

1.创建账号啥的就不说了2.创建一个repository (仓库）相当于是一个跟目录，可以往repository里面提交代码，下载代码。3.未完待续。。。

2017-08-21 16:48:59 239

原创 scrapy-redis的使用（基于scrapy的改装）

1.setting 配置文件修改# 1.(必须加)。使用scrapy_redis.duperfilter.REPDupeFilter的去重组件，在redis数据库里做去重。DUPEFILTER_CLASS = "scrapy_redis.dupefilter.RFPDupeFilter"# 2.（必须加）。使用了scrapy_redis的调度器，在redis里面分配请求。SCHEDULER

2017-08-21 10:16:48 2366

原创 scrapy-redis 介绍

1.介绍 scrapy是一个爬虫框架，但是不支持分布式。scrapy-redis在scrapy的基础上，更方便地实现了分布式。 scrapy-redis提供了下面四种组件（component）：（四种组件意味着scrapy的四个模块都要修改） Scheduler Duplication Filter Item Pipeline Base Spider Schedular: 改造了

2017-08-20 16:38:13 540

原创 RESTful 接口规范

1.什么是Restrest的全称是：Representational State Transfer, 中文意思是表述状态转移。符合架构原理的前提下，理解和评估以网络为基础的应用软件的架构设计，得到一个功能性强，性能好，适宜通信的架构。REST指的是一组架构约束条件和原则。 REST架构风格受web技术的影响很深，但是REST并不与HTTP绑定。2.理解RESTful要RESTful 架构，需

2017-08-20 11:17:32 435

原创 redis入门以及与python 的简单交互（windows环境）

1.redis是绿色安装的，只需要解压出来，就可以运行（配置环境变量）下载地址：链接：http://pan.baidu.com/s/1bP3eai 密码：rynh桌面管理的可视化工具（可装可不装，能界面化展示） redisktop工具下载连接 2.使用命令： redis-server 开启服务 redis-cli 使用客户端连接服务3.redis数据库没有名称，默认...

2017-08-16 11:05:58 475

原创 windows安装MongoDB 以及与pyhthon的交互

1.从官网下载msi https://www.mongodb.com/download-center#community linux 的下载地址命令：wget https://fastdl.mongodb.org/linux/mongodb-linux-x86_64-amazon-3.4.9.tgz2.将 mongo.exe（用于开启客户端的命令）和 mongod.exe（用于开...

2017-08-15 22:24:18 244

原创 u盘安装ubuntu linux系统

1.下载 ubuntu的 iso文件 2.在软碟通的菜单栏中打开 iso文件 3.软碟通刻录 ubuntu的iso文件在启动 –》写入硬盘镜像 –》选择格式（USB-HDD+)，还有USB-HDD，USB-ZIP，USB-HDD+，供选择，取决于主板的支持类型 4.进入bios 进行安装（未完待续）

2017-08-15 10:23:58 447

原创 windows 磁盘分区

1.右击屏幕下部分的任务栏选择磁盘管理2.将需要分出去的盘点击压缩 –》选择压缩大小3.这时会出现一个未分配的盘4.点击未分配的盘新建简单卷

2017-08-14 14:37:32 381

转载欢迎使用CSDN-markdown编辑器

欢迎使用Markdown编辑器写博客本Markdown编辑器使用StackEdit修改而来，用它写博客，将会带来全新的体验哦：Markdown和扩展Markdown简洁的语法代码块高亮图片链接和图片上传LaTex数学公式UML序列图和流程图离线写博客导入导出Markdown文件丰富的快捷键快捷键加粗 Ctrl + B 斜体 Ctrl + I 引用 Ctrl

2017-08-08 11:27:03 208

原创 python中 Selenium--》爬虫的终极大招，可用作自动化模拟操作

selenium是一个web的自动化测试工具，可以通过pip安装Python的selenium库来使用seleniumsudo pip install selenium光有selenium是不够滴，还需要配合浏览器来使用，推荐使用一下浏览器，并配置好环境变量。1.PhantomJS PhantomJS是一个无界面的浏览器，运行起来要比普通浏览器高效需要安装PhantomJS 2.Ch

2017-08-05 23:24:01 2897

原创 Proceess，Pool中的Queue通讯以及Thread中的Queue

自己的描述，不对之处，欢迎拍砖~~三个Queue的都是用于多任务的通讯功能，用法基本都一样: q.put(obj) q.get(obj)multiprocessing.Queue() 用于普通的进程间通讯–》multiprocessing.Processq = Queue()p = Process(target=process_test, args=(q,))q.put(0)multipr

2017-08-05 23:07:51 310

原创 python2和python3中的编码问题

a = ‘中文’ 在python2中是utf-8格式的编码在python3中是unicode格式的编码a = '中文'a'\xe4\xb8\xad\xe6\x96\x87'b = a.decode('utf-8')bu'\u4e2d\u6587'综上所述，在python2中，中文是使用指定的utf-8进行编码的，可以对其解码成unicode的格式（代码中的变量b）而在Python3中

2017-08-05 22:18:02 302

原创 python中二进制，八进制，十六进制的表现形式

二进制，八进制，十六进制的定义形式如下a = 0b101b = 012c = 0x12ax进制转10进制：注意，参数1必须是字符串哦a = int(str('101'), 2)x进制转二进制，八进制，十六进制，格式如下： bin-》转2进制， oct-》转8进制，int-》转10进制， hex-》转16进制a = bin(077)

2017-08-05 17:21:53 4561

原创 python中set和list的操作

set的操作差集 a-b交集 a&b并集 a | b对称差集 a^b（去掉子集的）list的操作 [待续]

2017-08-05 16:04:27 884

原创 python中的内建属性

常用内建属性（双下划线开头结尾），个人总结，欢迎拍砖 * len 配合 getitem，可以实现类似list的一些操作（切片，迭代等） * init new 初始化的操作 new在init之前执行,需要添加返回值： def __new__(cls, *args, **kwargs): print 'this is new...' return sup

2017-08-05 15:55:29 325

原创 python2，3中内建函数map，reduce，filter，sorted配合lambda

filter：对可迭代对象过滤# 过滤出列表中大于2的元素l_r = [1, 2, 3, 4]l_a = filter(lambda a: True if a > 2 else False, [1, 2, 3, 4])print l_a其实filter被map替代(用none来替代），当map的传入参数返回为空/返回传入参数其他的几个内建函数 * map(f, list) 将f与

2017-08-05 09:36:15 284

原创 markdown编辑器

练习使用markdown来写博客列表用法 *空格方式列表1列表2加粗列表 ctrl+B点我到百度哦点点ctrl+L插入图片ctrl+Gctrl+H 标题下面是无需列表 ctrl+U无序列表1无序列表2下面是有序列表 ctrl+O列表1.空格列表1.空格横线 ctrl+R：...

2017-08-03 12:28:18 229

longshuo1995的博客