- 博客(4)
- 收藏
- 关注
原创 Scrapy爬虫单元测试神器scrapy_pytest
Scrapy-Pytest Scrapy-Pytest,是基于pytest的方便为Scrapy框架写的爬虫设计的单元测试工具。其主要基于Scrapy的HTTPCache 功能缓存的Request和Response数据,通过HTTP缓存,生产对应的Request和Response对象,可以不重新依赖 于网络进行对Scrapy爬虫的测试,目前可以支持自动生产Scrapy爬虫的各个解析函数(内置pars...
2019-06-18 23:38:32 1274
原创 使用Charles和小米手机MIX3进行手机HTTPS抓包
环境准备 电脑安装好Charles,并安装好Charles的证书,并在添加SSL ProxyHelp > SSL Proxy > Install Charles Root Certificate Proxy > SSL Proxy Settings , 添加 *:443, 即抓取所有HTTPS的包 手机安装Chrome浏览器,切勿使用小米自带的浏览器,很坑的 环境配置 ...
2019-06-07 11:22:20 4113 5
原创 使用kubeadm极速搭建Kubernetes集群
前言 最近在学习Kubernetes的使用,但其集群搭建颇为复杂,虽然网上有许多搭建的教程,但不是版本久远,相关资源找不到了,便是及其的复杂,对基本的基础设施环境也是一笔带过,在跟随步骤的时候总是出现写莫名其妙的问题。在参考了网上众多教程和自己的实践之后,整理了自己的一套方案,适用于学习使用。 Kubernetes部署方案至少三种,使用minikube搭建单机的集群,这个方法可以很快的体验Kube...
2019-05-26 21:01:08 459
原创 Dockerfile - Docker In Practice
在Docker中,创建镜像有4中标准方法 docker的手工命令,docker commit 一个容易创建 Dockerfile,这次的主题 Dockerfile及配置管理工具,与Dockerfile相同,但是将构建的控制权交给配置管理工具 在空白的镜像导入tar文件 Dockerfile常用命令 FROM - 定义基础镜像 MAINTAINER - 声明维护人员(可以偷懒不写) RUN - ...
2019-05-18 12:51:27 194
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人