requests之防盗链学习

最新推荐文章于 2024-08-10 10:09:09 发布
最新推荐文章于 2024-08-10 10:09:09 发布
阅读量102 收藏
点赞数
文章标签： 爬虫
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_53155105/article/details/124394359
版权
本文介绍了使用requests库处理视频防盗链，通过获取contId、videoStatus的json数据解析srcURL，并对URL进行修正，最终实现视频的下载。详细步骤包括分析数据、处理响应和下载过程。
摘要由CSDN通过智能技术生成

分析理解:

1.拿到contId

2.拿到videoStatus返回的json --> srcURL

3.srcURL里面的内容进行修整

4.下载视频 

watermark,type_d3F5LXplbmhlaQ,shadow_50,text_Q1NETiBA5pif5pif5pys5p2l5bCx5b6I576O,size_15,color_FFFFFF,t_70,g_se,x_16

 watermark,type_d3F5LXplbmhlaQ,shadow_50,text_Q1NETiBA5pif5pif5pys5p2l5bCx5b6I576O,size_20,color_FFFFFF,t_70,g_se,x_16

防盗链具体看浏览器返回的数据

watermark,type_d3F5LXplbmhlaQ,shadow_50,text_Q1NETiBA5pif5pif5pys5p2l5bCx5b6I576O,size_12,color_FFFFFF,t_70,g_se,x_16

 

最低0.47元/天 解锁文章
星星本来就很美
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
request.getHeader("referer")防盗链
05-07
HTTP headers是HTTP请求和相应的核心模块，它承载了关于客户端浏览器、请求页面、服务器等相关信息。Referer是HTTP头中的一个属性，告诉服务器我是从哪个页面链接过来的。
request基础，以及防盗链
jingtianxiaozhi的专栏
10-30 702
总结： request的比较重要的方法 request.getParameter request.getAttribute request.getSession.setAttribute/request.getSession.getAttribute request.getCookies  request.getContextPath()获取工程名 -----------------
爬虫学习5——requests进阶（cookie登录、防盗链、
qq_57099024的博客
03-09 311
cookies登录 登录之后会得到服务器返回的cookie，使用cookie请求我们需求的url页面 session用于保持登录信息，在这个过程中cookie信息不会丢失 session=requests.session() 方法一：在提出申请时指定cookie import requests resp=requests.get('https://user.17k.com/ck/author/shelf?page=1&appKey=2406394919',headers={'Cooki
requests进阶（cookie、防盗链、代理）
Lum1n0us's Blog
03-07 477
文章目录打码简介使用打码平台识别网页验证码的流程 打码简介 反爬机制：验证码——识别验证码中的数据，用于模拟登录操作 识别验证码的操作：第三方自动识别 云打码使用流程：下载python对应的api接口后，修改其中用户的信息，换成自己的。 使用打码平台识别网页验证码的流程 将验证码图片进行本地下载 调用平台提供的示例代码进行图片的数据识别 ...
防盗链
feiYu12138的博客
10-13 270
#coding:utf-8 import urllib.request """ # 下载普通图片 url = "http://pic22.nipic.com/20120725/9676681_001949824394_2.jpg" response = urllib.request.urlopen(url) with open("k.jpg", "wb")as fp: fp.write(r...
python3 图片referer防盗链的实现方法
12-23
本篇文章主要破解referer防盗链技术 referer防盗链技术： referer防盗链技术是服务器通过检查客户端提起的请求包内的referer字段来阻止图片下载的，如果referer字段错误，服务器会跳到另一个地址，这将导致错误的...
03.防盗链1
08-03
总结来说，这段代码展示了如何使用Python的`requests`库处理网站的防盗链机制，通过模拟浏览器行为并正确设置请求头，获取并下载视频内容。同时，也体现了JSON数据在Web服务中的应用，以及字符串操作在处理动态URL中...
python 爬虫之抓取页面图片
04-18
在实际操作中，可能需要处理各种情况，比如图片的防盗链机制、登录验证、动态加载等。对于动态加载的内容，可能需要使用像`selenium`这样的浏览器自动化工具；对于需要登录的网站，需要实现登录功能并将cookie或...
信息采集之Python-存储媒体文件.pptx
09-15
例如，网站通常会实施防盗链策略防止非法引用，这可能导致爬虫运行受阻。此外，依赖外部服务器的文件可能随时改变或失效，影响应用的稳定性。最后，现代网络浏览器在加载HTML页面时会同时下载所有资源，而爬虫通常也...
Springboot上传服务源码
05-14
图片防盗链是防止他人未经许可直接引用我们服务器上的图片资源的一种常见安全措施。我们可以在资源服务中添加逻辑，检查请求头中的`Origin`或`Referer`字段，只允许来自我们网站的请求访问图片。若检测到请求来源于...
python 爬虫之登录和反盗链
Hello world from Stephen
09-28 378
python 爬虫
web页面防盗链功能使用--request.getHeader("Referer")
热门推荐
ITSTAR
01-02 1万+
1. 防盗链定义：所谓防盗链是指防止其他web站点页面通过连接本站点的页面来访问本站点内容，这样对于本站点来说侵犯了本站点的版权 2.非法用户： 常访问本站点页面的链接有三种出处:    (1) 地址栏输入链接地址。如地址栏上输入www.csdn.com/news_100.jsp；    (2)其他站点上的应用程序的页面上通过链接本站点页面资源。如(www.123.com/content.j
Python--爬虫，了解防盗链--＞解决防盗链，解决反反反爬
qq_57663276的博客
11-03 2247
Pyhton--爬虫，爬取（5）--解决防盗链
判断request请求头中的referer实现的防盗链操作
qq_42039288的博客
11-13 1642
通俗的来讲，跨站访问资源，被称为盗链。比如某一个商业网站，有很多自主版权的图片，自身展示用于商业目的。而另一个没有版权的网站，希望在自己的网站上面也展示这些图片，直接使用超链接到有版权的网站，这样以来，大量的客户端在访问有版权的网站时，实际上消耗了没有版权网站的流量，从而侵犯的有版权网站的利益。 HTTP请求中会包含来自哪个url的点击来源，通过判断request请求头的refer是否来源于本站 我们就用优酷网站做示范 if(referer != null){ //请求头中是否包含优酷网地址 if(re
Python3爬虫之图片防盗链破解
Quincy.Coder的博客
09-07 6710
关键词：python，图片防盗链，破解背景： 想要在自己的网站上直接使用XX网站的图片链接，但是XX网站采用了图片防盗链，自己的网站上无法直接使用。 图片防盗链实现的原理： 图片防盗链技术是指在通过链接访问图片时，检查了图片访问请求的头部信息中的referer，如果请求中的referer信息不满足被访问网站的设置则无法获取图片。 知道了原理后想办法如何解决： 1. 将自己网站http升级为
Python3爬虫之突破天涯防盗链
Quincy.Coder的博客
09-07 2139
import requests from bs4 import BeautifulSoupurl = 'http://bbs.tianya.cn/post-funinfo-6678943-1.shtml' pic_url = 'http://img3.laibafile.cn/p/l/229969207.jpg' # url_content = requests.get(url+pic_url)#
Python3爬虫之破解图片防盗链
Quincy.Coder的博客
09-07 7218
import requests, os, os.path, urllib, random from bs4 import BeautifulSoup def get_soup(url): """ 获取网站的soup对象 """ my_headers = [ 'Mozilla/5.0 (Windows NT 5.2) AppleWebKit/534.30
防盗链之--request.getHeader("Referer")
lishijun155的博客
09-27 793
在开发web程序的时候，有时我们需要得到用户是从什么页面连过来的，这就用到了referer。 它是http协议，所以任何能开发web程序的语言都可以实现,比如jsp中是： request.getHeader("referer"); php是$_SERVER['HTTP_REFERER']。其他的我就不举例了（其实是不会其他的语言）。 js的话就是这样做：javascript:docum
Python——爬虫
最新发布
2302_81225694的博客
08-10 88
上述代码中的示例网页URL为https://www.example.com，你可以将其替换为你所需爬取的网页地址。代码首先使用requests库发送HTTP GET请求获取网页内容，然后使用BeautifulSoup库解析网页内容。最后提取了网页的标题和所有链接，并打印出来。当编写一个Python爬虫时，你可以使用BeautifulSoup库来解析网页内容，使用requests库来获取网页的HTML代码。请注意，爬取网页时需要尊重网站的使用规则，并遵守相关法律法规。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值