![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python
文章平均质量分 60
码农螺丝钉
严于律己、宽以待人、知恩图报
展开
-
史上最全常见的加解密实现方式
史上最全常见的加解密实现方式原创 2022-10-10 18:47:18 · 3800 阅读 · 0 评论 -
CTF&爬虫:掌握这些特征,一秒识别密文加密方式
掌握这些特征,一秒识别密文加密方式前言爬虫工程师在做加密参数逆向的时候,经常会遇到各种各样的加密算法、编码、混淆,每个算法都有其对应的特征,对于一些较小的网站,往往直接引用这些官方算法,没有进行魔改等其他操作,这种情况下,如果我们能熟悉常见算法的特征,通过密文就能猜测出使用的哪种算法、编码、混淆,将会大大提高工作效率!在 CTF 中通常也会有密码类的题目,掌握一些常见密文特征也是 CTFer 们必备的技能!本文将介绍以下编码和加密算法的特征:编码:Base 系列、Unicode、Esca原创 2022-10-10 14:18:23 · 537 阅读 · 0 评论 -
python爬虫--面试总结
python爬虫--面试总结 2022版原创 2022-07-18 23:38:29 · 426 阅读 · 0 评论 -
Python 常见的 170 道面试题全解析:2022 版
Python 常见的 170 道面试题全解析:2022 版原创 2022-07-18 23:22:27 · 18982 阅读 · 2 评论 -
url去重的几种方式
Set 集合天生具备不可重复性,使用它只能存储值不相同的元素,如果值相同添加就会失败,因此我们可以通过添加 Set 集合时的结果来判定 URL 是否重复通过研究java的set集合底层源码可以知道,Set底层是Hash来实现的,Hash类型是散列,所以是无序的。以传入的值作为key值,PERSENT作为value来存储到map中,如果key值相同,将会覆盖,这就是set为什么能去重的原因(key相同会覆盖)。Redis Set 集合是一个无序的、自动去重的集合数据类型,Set底层用两种数据结构存储,一个是原创 2022-06-14 17:49:42 · 1592 阅读 · 0 评论 -
pipreqs(找当前项目依赖的包)
1.安装pipreqs可以帮你找到当前项目的所有组件及其版本。就是当别人给你一个程序的时候,你要在自己电脑上运行起来,就需要安装程序所依赖的组件,总不能自己一个一个找吧。# 安装pip3 install pipreqs2.使用步骤# 使用步骤 1.在项目根目录下执行命令 pipreqs ./ --encoding=utf-8 2.可以看到生成了requirements.txt文件 3.执行下面代码就会把项目用到的所有组件装上 pip3 in原创 2022-05-22 19:57:28 · 372 阅读 · 0 评论 -
爬虫阶段技术
爬虫阶段技术,学习路线原创 2022-05-22 19:53:43 · 664 阅读 · 0 评论 -
scrapy post请求formdata与body的区别
scrapy post请求formdata与body的区别原创 2022-05-22 19:38:38 · 1498 阅读 · 0 评论 -
numpy 图片水印去除
numpy 图片水印去除原创 2022-05-22 19:33:10 · 196 阅读 · 0 评论 -
scrapy 状态码400问题
scrapy 状态码400问题原创 2022-05-22 19:28:53 · 701 阅读 · 1 评论 -
猿人学2022年App逆向--第一题 java层加密
第六题,先搞个unidbg看能不能跑起来加载so是没问题的,动态注册函数地址能跑出来,然鹅调用getDeviceId函数就无穷无尽的报错,patch了半天,先放弃这个方法,转成用frida分析,找到核心加密函数再说so文件扔进ida,简单过一下分析快捷键g,输入0x49ff4[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-Qlh8LezR-1653216943046)(D:\youdaoyun\qqBF5B470D9BE5B28E891CBD790EE637AD\926原创 2022-05-22 19:13:11 · 660 阅读 · 0 评论 -
pip3 install XXX加快下载速度
pip3 install XXX加快下载速度通常安装是使用国外的源,所以较慢;我们可以使用国内的源进行提速:TensorFlow官网下载地址:https://pypi.org/project/tensorflow/#files豆瓣源:pip install tensorflow -i https://pypi.douban.com/simple或者:pip install tensorflow-2.3.1-cp38-cp38-win_amd64.whl -i https://pypi.dou原创 2022-05-17 14:09:31 · 629 阅读 · 0 评论 -
阿里云linux服务器下安装scrapy2.4.1框架
阿里云linux服务器下安装scrapy2.4.1框架1.下载scrapy框架:wget [https://files.pythonhosted.org/packages/75/0a/2434fb7b8427987429ed4d92e80716b27906fb485dd2b8413f7855b48f59/Scrapy-2.4.1.tar.gz]2.解压:tar -vxzf Scrapy-2.4.1.tar.gz3.进入Scrapy路径cd Scrapy-2.4.14.安装incremental原创 2020-12-16 16:16:53 · 172 阅读 · 0 评论