![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Python
qq_33605607
这个作者很懒,什么都没留下…
展开
-
Django采坑记录
目前js逆向遇到的函数、解法或者其他注意事项集合0x01、Object(需要调用的函数名)(参数)用法详解后面的参数将传递到需要调用的函数名中,如下:// s.c对应e1 s.d对应e2 s.e对应sig// 这里注意一下:object(sig)(f)表示将f传递到sig里面去var f = Object(e1)(Object(e2)(JSON.stringify(l.payl...原创 2019-10-24 09:41:17 · 114 阅读 · 0 评论 -
必知必会——selenuim/pyppeteer模拟登陆防检测破解(非js注入那种,js注入现在也不能绝对有效解决)(这个是需要下载的)
前言对于使用模拟登陆等操作来爬虫的手段,已经很容易被检测了,网上很多教程是说在网站所有js代码执行之前来执行下面几个js代码来到达效果:js1 = '''() =>{Object.defineProperties(navigator,{ webdriver:{ get: () => false}})}'''js2 = '''() => {alert(window.navig...原创 2019-09-28 11:10:30 · 583 阅读 · 1 评论 -
爬虫:js逆向目前遇到的知识点集合
目前js逆向遇到的函数、解法或者其他注意事项集合0x01、Object(需要调用的函数名)(参数)用法详解后面的参数将传递到需要调用的函数名中,如下:// s.c对应e1 s.d对应e2 s.e对应sig// 这里注意一下:object(sig)(f)表示将f传递到sig里面去var f = Object(e1)(Object(e2)(JSON.stringify(l.payl...原创 2019-09-28 11:09:49 · 312 阅读 · 1 评论 -
一分钟学会——永久设置pip指定国内镜像源(含Windows和Linux)
前言首先来看一下Python临时指定安装的镜像源:命令格式:sudo pip3 install 包名 -i 镜像源urleg:sudo pip3 install redis -i http://pypi.douban.com/simple可能临时的指定镜像源安装已经不再符合你的口味了,因为每次安装都是要加上-i xxxx一大串,有点浪费生命啊,那么有没有永久设置镜像源的方法呢?那肯...原创 2019-09-28 11:08:54 · 1163 阅读 · 0 评论 -
自动扫描当前项目,生成python依赖清单
Python项目生成requirements.txt文件之pipreqs的使用使用pipreqs,这个工具的好处是可以通过对项目目录的扫描,发现使用了哪些库,生成依赖清单。1、先安装这个库:pip install pipreqs2、使用方式在项目的根目录下使用:pipreqs ./ --encoding=utf83、结果是:生成requirements.tx,可以根据这个文件下...原创 2019-09-28 11:08:13 · 196 阅读 · 0 评论 -
CSS字体反爬实战,10分钟就能学会
前言本次来解锁新姿势——CSS字体反爬。在解决这个字体反爬的路上,当我以为解决这个反爬手段的时候,最后验证总的答案的时候,被打脸了!!!又被默默设埋伏了,踩了一个坑,巨大的,为何悲伤辣么大 <(-︿-)>不将html源码页面下载下来还真发现不了在哪写错了,不多说,赶紧来看一下呗~~0x01、分析目标网站还是同样的手段,打开F12进行选中数字,查看它的标签内容是什么...原创 2019-09-28 11:07:26 · 201 阅读 · 0 评论 -
woff字体反爬实战,10分钟就能学会
声明:本帖子仅是用于学习用途,请勿与用于恶意破坏别人网站,本人不承担法律责任。来继续学爬虫呀!前言简单描述一下这种手段,html源码的数字跟页面展示的数字是不一致的!当时就一脸黑人问号,嗯???经过分析,当前这种字体反爬机制是:通过获取指定链接的woff字体文件,然后根据html源码的数字去woff字体文件里面查找真正的数字,讲到底就是一个映射关系/查找字典。如html源码是123,去w...原创 2019-09-28 11:06:09 · 314 阅读 · 0 评论 -
从pdf提取图片,有两个库可以提取fitz(要install pymupdf)、pdfminer(install pdfminer3k)
前言:下面的代码有注释,下面的也是参考别人的,但是忘记来源了,因为时间隔太久了,哪位小伙伴看到了,可以提一下链接方法一,这个测试是有用的,fitz(要install pymupdf)#!/usr/bin/python3# -*- coding: utf-8 -*-# @Time : 2019/3/19 08:51# @Author : qizai# @File : fet...原创 2019-09-28 11:00:29 · 1114 阅读 · 0 评论 -
Python最好用的第三方库资源下载网址
0x01、Windows安装python库,如果你python使用pip安装库文件不成功的话,你可以尝试下面的网址,里面文件太多,你可以ctrl+f来搜索你需要的文件,找到必须要的文件download下来,在本地使用pip安装就行了链接:https://www.lfd.uci.edu/~gohlke/pythonlibs/#genshi网站首页如下图:...原创 2019-09-28 10:50:33 · 898 阅读 · 1 评论 -
详细讲解aiohttp异步请求及使用,高效率
0. 前言本文翻译自aiohttp的官方文档,如有纰漏,欢迎指出。aiohttp分为服务器端和客户端,本文只介绍客户端。另外我已经对 aiohttp 和 asyncio进行了封装,可以参考我的 github 地址:https://github.com/web-trump/ahttp由于上下文的缘故,请求代码必须在一个异步的函数中进行:async def fn(): ...翻译 2019-09-28 10:47:36 · 1705 阅读 · 1 评论