尝试WebSocket握手验证反爬虫

最新推荐文章于 2024-04-01 16:02:34 发布
最新推荐文章于 2024-04-01 16:02:34 发布
阅读量399 收藏 1
点赞数
文章标签： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_23246143/article/details/118857170
版权

尝试WebSocket握手验证反爬虫

参考

记一次WebSocket握手验证反爬虫

爬取

爬取网址：https://live.611.com/zq
根据审查元素，XHR
在这里插入图片描述
WS
在这里插入图片描述
发现data关联，取data值。

url='https://live.611.com/Live/GetToken'
res=requests.get(url).text
dict=json.loads(res)#str-->dict
data=dict['Data']
print(data)

在这里插入图片描述
在使用之前先安装非异步websocket，容易和异步websockets等混淆

pip install websocket-client

然后取出请求的str，补充请求的信息，尝试抓取20条

import json
import time
import requests
url='https://live.611.com/Live/GetToken'
res=requests
最低0.47元/天 解锁文章
活跃之鱼
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
python实现websocket_基于Python实现WebSocket握手过程
weixin_39757040的博客
12-22 417
import socketimport base64import hashlibdef get_headers(data):“””将请求头格式化成字典:param data::return:“””header_dict = {}data = str(data, encoding=’utf-8′)header, body = data.split(‘\r\n\r\n’, 1)header_list ...
websocket反爬
python的神奇之旅
12-07 535
''' websocket反爬 4.5 抓取乐鱼体育 1、获取token 2、构建message 3、websocket长连接 ''' from common.tools import Tool import requests import json import time import websocket class LeYu: def __init__(self): self.tool = Tool.get_tool() def get_cookie(self): .
WebSocket用户验证
Waiter软件工作室
04-01 1184
在WebSocket中，如何携带用户的验证信息。
反爬虫，到底是怎么回事儿？十分钟搞定它！
爬遍所有网站
09-27 2250
有位被爬虫摧残的读者留言问：「网站经常被外面的爬虫程序骚扰怎么办，有什么方法可以阻止爬虫吗？」 这是个好问题，自从 Python 火了起来，编写爬虫程序的门口越来越低，爬取别人网站数据也越来越猖獗。 阻止爬虫也就是我们这次要说的「反爬虫」，「反爬虫」涉及到的技术比较综合，说简单也简单，说复杂也复杂，看具体要做到哪种保护程度了。 下面我们说说常见的「反爬虫」技术。 一、前置知识 1. 动态网页和网页源码 传统的静态网页是指没有数据库和不可交互的纯 HTML 网页，它的页面生成后，如果不修改代码，.
【学习笔记】初识websocket及其握手过程
Left_Zzzz的博客
03-04 431
客户端收到应答后，要校验Sec-WebSocket-Key的值，如果该值和计算结果不符，或者不符合上面过程任一要求，则拒绝创建websocket连接。如果客户端校验无误，websocket就握手完成了。
Proverif软件验证 握手协议（存在 中间人攻击）
qq_39743001的博客
10-11 499
中间人攻击： I→B:pkI I→B:pkI I→B:pkI B→I:aenc(sign((pkB,k),skB),pkI) B→I:aenc(sign((pkB,k),skB),pkI) B→I:aenc(sign((pkB,k),skB),pkI) A→B:pkA A→B:pkA A→B:pkA I→A:aenc(sign((pkB,k),skB),pkA) I→A:aenc(sign((pkB,k),skB),pkA) I→A:aenc(sign((pkB,k),skB),pkA) A→I:senc(
php与websocket握手并读取pcm发送到websocket
02-27
php与websocket握手并读取pcm发送到websocket，在此程序包中有写好的websocket程序包及调用方法，可以与websoket握手成功，把pcm转换成二进制并上传到websoket服务器仅供参考
wshs：Websocket的秘密握手
02-04
Websocket的秘密握手 该项目的主要目标是通过websocket传输在golang中创建的新实现。 该项目还有其他一些目标： 优先考虑可读性/可理解性 优先考虑可用性/稳定性而不是速度 通过websockets工作 轻松更改网络密钥 ...
FridaAndroid 09-爬虫之WebSocket协议分析
最新发布
04-07
【Frida】【Android】 09_爬虫之WebSocket协议分析 gotify-cli-windows-amd64.exe gotify-windows-amd64.exe Gotify.apk
ws_Go_websocket_golang_gows爬虫_源码
10-02
GO 语言编写的websocket实例，非常简单实用，很好地说明了websoket在go语言中的应用
VB.net WebSocket 握手 封包 拆包
06-22
简单的WebSocket 握手 消息拆包 消息封包 方法
使用 Sa-Token 解决 WebSocket 握手身份认证
shengzhang_的博客
02-14 4867
在 WebSocket 中集成 Sa-Token 身份认证，保证连接的安全性……
springBoot JWT实现websocket的token登录拦截认证
god_sword_的博客
07-03 2736
springBoot JWT实现websocket的token登录拦截认证 功能：所有关于websocket的请求必须登录，实现websocket需要登录后才可使用，不登录不能建立连接。
Spring中的Websocket身份验证和授权
一起学习一起进步~
08-09 1785
如果UsernamePasswordAuthenticationToken构建没有通过GrantedAuthority，则身份验证将失败，因为没有授予权限的构造函数自动设置authenticated = false 这是一个重要的细节，在 spring-security 中没有记录。接着需要创建一个拦截器，它将设置“simpUser”标头或在 CONNECT 消息上抛出“AuthenticationException”。请注意：这@Order是至关重要的，它允许我们的拦截器首先在安全链中注册。
websocket握手拦截的时候获取到不是同一个session的一个小坑
qq_35101027的博客
06-20 7644
https://blog.csdn.net/panda929/article/details/52872128自己在用spring的websocket的时候，在request获取session的时候一直是null，后来发现是自己把自己坑了代码是这样的，自己是新手，参照网上写的，本来用的没什么问题，做的东东能两个人相互聊天还高兴了好久，结果第二天来懵了，一直获取不到session在websocket...
websocket服务器握手协议
weixin_30895603的博客
03-06 171
测试网页代码如下 <!DOCTYPE html> <html> <head> <title>测试 websocket 世界最简单案例</title> </head> <body> <script> var ws = new WebSocket("ws://127.0.0.1:800...
spring websocket 接口 校验token问题
热门推荐
yhtppp的专栏
03-14 1万+
spring 集成websocket，接口校验token时，遇到个问题，记录一下； 1、前端JS跨域请求，携带cookie，校验token， Android手机端，有的内置浏览器，跨域请求，携带cookie失效，导致无法校验token； 浏览器同源策略： https://developer.mozilla.org/zh-CN/docs/Web/Security/Same-ori...
websocket 爬虫
九茶
08-08 9115
前言 有些网站为了追求数据的实时更新，很多时候会采用 websocket 的方式，例如股票交易数据、数据货币交易平台等。关于websocket的机制，网上不乏相关资料。但关于websocket的爬虫文章，还是比较少的。所以特地写此文章做个分享，希望对他人有所帮助。 正文 1、 首先要意识到，websocket和普通的HTTP请求有些不同。websocket的方式：用户浏览器（客户...
Java WebSocket爬虫
空夜's Blog
04-11 2954
之前有个需求，要抓取某个网站视频的弹幕数据，坑爹的是它这个实时弹幕是基于WebSocket的。因为这个，接触到了WebSocket技术，关于WebSocket基本知识的博客请参照这一篇Java WebSocket实例。 今天来总结一下如何利用java模拟客户端，与目标服务器建立WebSocket连接，抓取对方的数据。 需要的依赖： <dependency> <groupId...
websocket 握手
09-13
WebSocket 握手是在客户端和服务器之间建立 WebSocket 连接时进行的一种协议交换过程。它通过 HTTP/HTTPS 协议来进行握手，具体步骤如下： 1. 客户端发送一个 HTTP 请求给服务器，包含了一些特定的头部信息，如 Upgrade、Connection、Sec-WebSocket-Key 等。 2. 服务器接收到这个请求后，会进行一些验证和解析。 3. 服务器生成一个 Sec-WebSocket-Accept 响应头，它的值是由 Sec-WebSocket-Key 经过一系列算法计算得出的。 4. 服务器返回一个 HTTP 响应给客户端，包含了状态码 101 Switching Protocols 和 Upgrade 头部，表示要升级到 WebSocket 协议。 5. 客户端接收到服务器的响应后，会进行一些验证和解析。 6. 客户端确认握手成功后，即可开始通过 WebSocket 进行双向通信。 通过 WebSocket 握手成功后，客户端和服务器就可以使用全双工通信来实时交换数据，而不需要每次都发送完整的 HTTP 请求和响应。这使得 WebSocket 成为实现实时通信的重要技术之一。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值