python 爬虫 Orgin 登录页

最新推荐文章于 2022-12-12 13:25:58 发布
最新推荐文章于 2022-12-12 13:25:58 发布
阅读量462 收藏
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43751840/article/details/89116641
版权
本文介绍了如何针对一个使用了加密cid参数的Origin登录页面进行爬虫操作。通过分析网络请求，找到POST提交表单的API接口，然后在JS文件中定位到cid的加密函数，通过断点调试揭示了加密函数的细节，其中第一个参数为账号，第二个参数为账号和密码的加密串。
摘要由CSDN通过智能技术生成

目标网站
在这里插入图片描述
点击登入，会弹出登录界面
在这里插入图片描述
随便输入账号密码，查看network
在这里插入图片描述
找到post提交表单的请求，查看账号密码提交的api接口
在这里插入图片描述
发现参数中有一个加密参数cid
全局搜索请求地址，找到发起请求的js文件
文件内搜索关键词cid，找到加密函数
在这里插入图片描述
打断点调试
在这里插入图片描述
发现cid加密函数本体在这里，第一个参数是账号，第二个参数是账号和密码一起加密生成的字符串

Mandy。
关注
【Python爬虫系列】_016.关于登录和验证码
weixin_50296259的博客
09-10 1265
首先查看登录时发送的请求中，请求头中cookie信息查找cookie信息的来源（通过哪个请求的响应携带回来的）这个案例中，登录请求的cookie信息是通过验证码请求返回携带的但有些网站并不是，所以每个网站可能都不同，需要具体跟踪分析通过session对象发送请求，获取验证码图片，并自动保存cookie信息识别验证码图片，获取验证码登录账号、密码、验证码等创建post请求参数使用保存了cookie信息的session对象向登录页面发送post请求。
python爬虫之git的使用（origin说明）
weixin_30564901的博客
08-31 122
1、首先我们回忆两个命令 #git remote add origin远程仓库链接 #git push -u origin master 　　我们一起看看这个命令，git是git的一级命令，push就是下载，-u应该使用用账户验证maser就是分支的名字（前面我们说过），那么这个origin是个什么鬼？ 　　大家看看下面的这个5毛钱图，就能发现，其实origin就是远程仓库的名称。 ...
python 爬虫基础（一）
F_Origin的博客
08-30 169
python 爬虫基础（一）HTTP基本原理1.URL和URI的关系2.超文本3.HTTP和HTTPS HTTP基本原理 1.URL和URI的关系 URI全称为Uniform Resource Identifier，即统一资源标志符。URL的全称为Universal Resource Locator,即统一资源定位符。简单来说，URL是URI的一个子集，即URL一定是URI，而URI不一定是URL...
python CSDN模拟登陆（三种方法）
china_python的博客
11-25 939
第一种方法：requests直接携带cookies 上代码： import requests import re class myLogin(): def __init__(self): self.header = { 'User-Agent': 'iTunes/4.2 (Macintosh; U; PPC Mac OS X 10.2)',
使用Python登录CSDN（最新验证可用）
LMR的博客
04-20 7966
作为一个爬虫菜鸟，今天在网上看到使用Python来模拟登录的博客，就在CSDN上试了试，结果处处碰壁。由于CSDN更新了登陆验证方式，网上的一些方法已经不能使用，试了很久终于是模拟登陆成功了，但是频繁登陆会导致账号异常。 谷歌浏览器查看登录请求 网址：https://passport.csdn.net/login?code=public，输入账号密码登陆，查看NetWork，如下...
CSDN登录机制分析(附上python、java代码)
bigsai
07-15 4302
大纲 前言 分析加密参数 uaToken webUmidToken 发送模拟请求 对比解决障碍 浏览器发送 postman模仿 小结 编写代码 前言 很久以前研究过csdn的模拟登录，记得那个时候的csdn登录还是一个`form``表单，然后参杂着一些参数。使用遍历input元素把表单各个参数拿下来。存下直接post即可登陆成功。 前几天再次看了下亲爱的csdn。突然发现...
python爬虫爬取多个页面_Python 爬虫爬取多页数据
weixin_39583222的博客
11-21 9764
但是，按照常规的爬取方法是不可行的，因为数据是分页的：最关键的是，不管是第几页，浏览器地址栏都是不变的，所以每次爬虫只能爬取第一页数据。为了获取新数据的信息，点击F12，查看页面源代码，可以发现数据是使用JS动态加载的，而且没有地址，只有一个skipToPage(..)函数。所以，解决方案是：获得请求信息，包括header和 form data(表单信息)模拟请求，获得数据分析数据，获得结果以下为...
python爬取下一页_Python 爬虫爬取多页数据
weixin_39849387的博客
12-06 3481
但是，按照常规的爬取方法是不可行的，因为数据是分页的：最关键的是，不管是第几页，浏览器地址栏都是不变的，所以每次爬虫只能爬取第一页数据。为了获取新数据的信息，点击F12，查看页面源代码，可以发现数据是使用JS动态加载的，而且没有地址，只有一个skipToPage(..)函数。所以，解决方案是：获得请求信息，包括header和 form data(表单信息)模拟请求，获得数据分析数据，获得结果以下为...
python 爬虫遇到验证码如何解决
m0_68157946的博客
12-12 2953
爬虫遇到验证码的问题,如何完善代码,以及遇到的问题
python爬虫跨域_python 跨域处理方式
weixin_39810856的博客
12-08 2275
因为浏览器的同源策略限制，不是同源的脚本不能操作其他源下面的资源，想操作另一个源下面的资源就属于跨域了，这里说的跨域是广义跨域，我们常说的代码中请求跨域，是狭义的跨域，即在脚本代码中向非同源域发送http请求浏览器的同源策略(SOP/same origin policy)是浏览器最核心也最基本的安全功能，如果缺少了同源策略，浏览器很容易受到XSS(跨站脚本攻击 cross site scripti...
爬虫学习——参数请求及请求头使用
weixin_53919192的博客
04-20 4829
本文介绍了网页爬虫带参数请求数据的具体需求与步骤，希望对你有帮助，加油，希望你我一同走进爬虫的世界~~
【python实战】怎么用python自动登录CSDN
请大家直接把问题写在评论区或留言，不要只说一句"你好 或 在吗"，我会尽快回复的。
04-20 1万+
目录 先上效果 页面分析 引入selenium模块及驱动 1、并将安装好的Chromedriver.exe引入到代码中 2、浏览器驱动引入 爬虫模拟登录 1、设置网址链接 2、切换到账号密码登录 3、找到用户名密码的控件ID 4、注入用户名和密码 5、模拟登录点击 成功登录CSDN 先上效果 页面分析 CSDN登录页面如下图 引入selenium模块及驱动 1、并将安装好的Chromedriver.exe引入到代码中 # -*- coding:utf-8 -*-
我的第一个Python爬虫——谈心得
热门推荐
跬步至以千里的博客
03-30 35万+
　　　2018年3月27日，继开学以来，开了软件工程和信息系统设计，想来想去也没什么好的题目，干脆就想弄一个实用点的，于是产生了做“学生服务系统”想法。相信各大高校应该都有本校APP或超级课程表之类的软件，在信息化的时代能快速收集/查询自己想要的咨询也是种很重要的能力，所以记下了这篇博客，用于总结我所学到的东西，以及用于记录我的第一个爬虫的初生。 一、做爬虫所需要的基础 二、介绍几款优秀制作...
python 爬虫实战（一）
F_Origin的博客
09-02 431
python 爬虫实战（一）爬取校花网图片1.所用工具总结2.代码部分3. 运行结果4.坑的总结 爬取校花网图片 1.所用工具总结 python3.7 requests urllib lmxl 2.代码部分 download.py import requests from urllib.parse import urljoin import lxml.html # 解决lxml 中读取不到et...
python模拟登陆csdn，实测登陆正常
琴子小白的博客
08-06 966
准备在csdn上发布文章，但是自己有个人博客网站，文章同时发布个人 网站和csdn操作发布两边操作太过麻烦，于是想到了模拟登陆，通过模拟登陆csdn网站后，再进行推送文章内容到csdn上。 1、第一步是抓取到对应的登陆地址和相关传输的信息。 csdn的登陆地址是https://passport.csdn.net/account/verify， 可以在POST的信息中查看到对应的登陆信息 ...
python爬取steam市场数据
weixin_41396062的博客
10-01 9141
#steam-ak47-jiujngshachang-jiaoyijilu import csv import requests import re url=‘https://steamcommunity.com/market/listings/730/AK-47 | Redline (Field-Tested)’ headers={ ‘user-agent’:‘Mozilla/5.0 (Linu...
allow control allow origin_Origin如何提取图片数据(图文教程)
weixin_39575758的博客
11-06 776
导言有些时候，我们在看文献，想看看作者的实验数据，但是我们只有图；又或者自己的实验由于某种原因，只剩下图片了，数据不见了，这种情况该怎么办呢？今天，我们来使用万能的Origin软件进行数据的提取，方便大家用来以防万一，或者去进行别人文献数据的提取。软件Origin 2019b (其他版本的软件也都可以试试)图文教程下来我找到了一张文献中的粒径测量图，我们以此来演示一下如何获取图中的数据。参考文献：...
python爬虫获取steam验证码
weixin_41396062的博客
05-04 3906
在尝试着写一个自动注册steam账号的程序，注册的时候需要验证码， 用pytesseract试着对steam验证码进行识别，但是结果很不理想，几乎没有正确的 得到的验证码结果，下一步尝试着训练个模型来识别验证码 import requests import time import json login_url ='https://store.steampowered.com/login' ...
python模拟生成steam手机二次验证令牌
weixin_41396062的博客
05-03 4736
最近在尝试着写个steam自动上架交易的程序，结果发现涉及的东西好多… steam登录的时候需要输入手机令牌，手机令牌是动态生成的，每隔30s更新一次，断网的情况下也不会受影响 这种令牌大多是基于TOTP（TOTP是基于散列的消息认证码（HMAC）的示例。 它使用加密哈希函数将密钥与当前时间戳组合在一起以生成一次性密码。 ）实现的，，， 根据秘钥和时间戳生成验证码的算法参考了sda的代码，改了N...
python爬虫模拟登录超星学习通
最新发布
05-04
要模拟登录超星学习通，你需要先了解超星学习通的登录方式。超星学习通的登录方式有两种：账号密码登录和扫码登录。账号密码登录需要你模拟表单提交，扫码登录需要你模拟二维码的生成和扫描。 以下是账号密码登录的...
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值