爬虫
文章平均质量分 58
专职
人生苦短,我用python
展开
-
浏览器控制台安装并使用npm
有时候想调用npm里的库跟api,正常我们项目环境里可以直接调用,其实也可以直接在开发者工具的控制台里安装,然后调用安装好的库的api。原创 2024-09-05 10:49:50 · 268 阅读 · 0 评论 -
m3u8视频下载详解
m3u8视频分两种情况,一种是不加密的,另一种是通过AES加密的,加密的只需要对ts中的内容进行AES解密即可。注意:ts视频播放需要使用迅雷影音播放器。原创 2024-09-01 09:49:31 · 198 阅读 · 0 评论 -
spider-图片验证码自动识别
本文章中所有内容仅供学习交流,抓包内容、敏感网址、数据接口均已做脱敏处理,严禁用于商业用途或非法用途,否则由此产生的一切后果均与作者无关,若有侵权,请联系我立即删除!如果想要基于代码实现某些功能,就必须实现:自动识别验证码,然后再做其他功能。在很多登录、注册、频繁操作等行为时,一般都会加入验证码的功能。网上可以搜一个返回图片验证码的在线网址,此处使用xxx代替。可自行百度查看网址,此处使用xxx代替。基于python模块。原创 2024-08-31 11:41:26 · 447 阅读 · 0 评论 -
国际对称加密算法
AES算法是一种对称加密算法,密钥长度可以是128位、192位或256位,分为加密和解密两个过程。在JavaScript中,可以使用crypto-js模块进行AES加密和解密操作。pycryptodome是一个Python加密库,支持多种加密算法,包括DES、AES、SHA-1、SHA-256等。在JavaScript逆向中,了解这些算法的原理和使用方法是非常重要的。: AES 支持 16、24 和 32 字节的密钥长度(分别对应 AES-128、AES-192 和 AES-256)。原创 2024-08-30 09:30:15 · 295 阅读 · 0 评论 -
app抓包环境的搭建详细教程
里面查看是否成功添加了charles根证书,此时安装成功后,就可以抓取windows下的所有包了(Proxy 中的Windows Proxy需要打开,默认也是打开的,抓取windows所有网络请求)调试app抓包的时候,可以把charles中Proxy -> Windows Proxy先关闭掉,只抓模拟器中的包。应用 -> 设置 -> 网络互联网 设置成手动代理ip和端口,也就是charles安装2步骤中设置的ip地址和端口。注意:安装证书的过程中要安装到系统。下,win可以通过搜索。安装mumu模拟器,原创 2024-08-29 17:04:12 · 739 阅读 · 0 评论 -
python中selenium自动化爬取
【代码】python中selenium自动化爬取。原创 2024-08-26 16:21:23 · 285 阅读 · 0 评论 -
国际哈希常用算法
sha256算法、sha512、MD5算法。js实现md5有点区别,需要使用第三方包。hmac_sha256算法。原创 2024-08-21 18:10:37 · 398 阅读 · 0 评论 -
爬虫入门01
【代码】爬虫入门01。原创 2023-08-27 15:14:28 · 6966 阅读 · 1 评论 -
爬取网站表格数据到csv文件
from bs4 import BeautifulSoupimport requestsimport csvimport bs4num = 0# 检查url地址def check_link(url): try: r = requests.get(url) r.raise_for_status() r.encoding = r.apparent_encoding return r.text except: .原创 2020-06-18 16:35:25 · 490 阅读 · 0 评论