baidu_32542573的博客

原创 利用redis做分布式的原理

原创 因为使用了一些代理导致电脑突然无法上网

原创 scrapy-redis 和 scrapy 有什么区别？

 个人认为，scrapy和scrapy-redis不应该讨论区别。scrapy 是一个通用的爬虫框架，其功能比较完善，可以帮你迅速的写一个简单爬虫，并且跑起来。scrapy-redis是为了更方便地实现scrapy分布式爬取，而提供了一些以redis为基础的组件（注意，scrapy-redis只是一些组件，而不是一个完整的框架）。你可以这么认为，scrapy是一工厂，能够出产你要的spid...

原创 安装Charles证书失败（夜神模拟器总是弹出此网站安全证书有问题），对安卓手机网络进行抓包

如何配置Charles，正确对手机进行抓包？提示无可用证书是怎么回事？尤其是小米手机/MIUI系统，必须如此设置！ 请自行在电脑端安装Charles，确保手机和电脑处于同一个网络环境，简单说，就是连接了同一WiFi。然后如图进入设置页。 在弹出页面，即显示了配置方法。需要在手机上进行IP代理，这里显示的就是电脑的IP和端口。冒号前是IP，后是端口，都知道的。...

原创 谷歌

原创 Charles

https://www.zzzmode.com/mytools/charles/

原创 进程与线程（一）

打个比方，打开word，word这个程序是一个进程，里面的拼写检查，字数统计，更改字体等等功能是一个个线程。当word这个进程启动的时候，系统分配给word进程一些资源（CPU，内存等），当某个线程执行时需要资源时，就从word进程的资源池里取。...

原创 Python中主进程（process）与子线程（Thread）关系实例

https://blog.csdn.net/oatnehc/article/details/50616835https://www.cnblogs.com/ArsenalfanInECNU/p/8989770.html之前用python的多线程，总是处理不好进程和线程之间的关系。后来发现了join和setDaemon函数，才终于弄明白。下面总结一下。1.使用join函数后，主进程会在调...

原创 Python执行Js语句之ExecJs

https://www.jianshu.com/p/729be9639ac7

原创 Charles的破解

http://www.sdifen.com/charles4.htmlhttps://sdifen.ctfile.com/fs/XtH173790072 

原创 谷歌浏览器的使用

原创 常见加密方式和Python实现

https://www.jianshu.com/p/4ba20afacce2

原创 云打码

原创 验证码的简单识别

https://blog.csdn.net/Mikeoperfect/article/details/78512454?locationNum=5&fps=1

原创 云打码的简单使用

https://blog.csdn.net/qq_38661599/article/details/80862175 

原创 Python中如何将多张图片拼接为一张

方法一：https://www.zhaokeli.com/article/8344.html方法二：遇到的问题及解决方法：https://stackoverflow.com/questions/48248405/cannot-write-mode-rgba-as-jpeghttps://stackoverflow.com/questions/42462431/oserror-bro...

原创 获取网页下一页链接

思路一：a【last】思路二：url=‘http：//..........page=1’,可以利用url地址输入页码来查看总共有多少页，在利用for循环即可。思路三：。。。。。。。。。 ...

原创 字体反爬

字体反爬（例如去哪网，在浏览器页面中显示的是255，但通过抓取请求包获得的是288）

原创 JS解密

全国企业信息网：发送请求后，response.text得到的是js代码，通过对js进行分析得到判断哪一部分错误（去掉document等方法，这些方法是不执行的），通过执行JS得到一串字符串（有时候这一字符串是错误的，那就再对这个字符串进行JS加密，再解密），再将这一字符串与Cookie中的value进行匹配，...

原创 URL编码 JB2312编码 utf-8编码

此问题正在整理

转载 验证码处理（第三方包的安装）

Python3光学字符识别模块tesserocr与pytesseracthttp://www.cnblogs.com/zhangxinqi/p/9297292.html#_label2阅读目录1、安装tesseract、tesserocr、pytesseract  （1）windows下的安装 （2）linux下的安装 2、tesserocr与pytesseract模块的使用 ...

原创 Git实战二

Administrator@MS-20170301NRCW MINGW64 /d$ mkdir learngitAdministrator@MS-20170301NRCW MINGW64 /d$ cd learngitAdministrator@MS-20170301NRCW MINGW64 /d/learngit$ git initInitialized empty Git...

原创 Git中容易出错的地方

git Please tell me who you are解决方法：git commit -m "some init msg"*** Please tell me who you are.Run  git config --global user.email "you@example.com"  git config --global user.name "Your Name"to set yo...

原创 Git中容易出错的地方

git Please tell me who you are解决方法：git commit -m "some init msg"*** Please tell me who you are.Run  git config --global user.email "you@example.com"  git config --global user.name "Your Name"to set yo...

原创 Git是什么

https://blog.csdn.net/u012152619/article/details/51906008

原创 安装tesserocr错误解决办法

https://blog.csdn.net/qq_39208536/article/details/80765226 1.下载匹配的whl文件。链接地址：https://github.com/simonflueckiger/tesserocr-windows_build/releases2.查看自己的python版本 匹配对应文...

原创 验证码处理(环境配置)(一)

Python3 OCR技术（pytesser3）(https://blog.csdn.net/huangzhang_123/article/details/64921173)Python pyocr和Tesseract-OCR的安装以及使用(https://blog.csdn.net/huangzhang_123/article/details/61920975)Python下Tesseract ...

转载 验证码处理(环境配置)(二)

1.python-tesseract下载安装及使用(https://blog.csdn.net/qq_26158277/article/details/75053764)tesseract下载安装网上有多种办法，这里我只说我用的办法了： 登录到github的官网，然后再搜索栏里输入tesseract搜索  选中下图第一个  然后点击wiki选择我们要下载的版本 这里我安装的是windows版本的，...