如何抓取土豆网的视频原文件--原理实现

最新推荐文章于 2020-03-12 15:15:32 发布

szw104

最新推荐文章于 2020-03-12 15:15:32 发布

阅读量2.7k

点赞数

分类专栏：软件开发技术文章标签： flv server unix date etag function

本文链接：https://blog.csdn.net/szw104/article/details/1871430

版权

本文介绍了如何抓取土豆网的视频原文件，通过分析HTTP请求响应过程，揭示了从播放页URL到获取FLV文件的步骤，包括302重定向、播放器下载及通过POST请求player/info.php来获取真正的FLV文件地址。

摘要由CSDN通过智能技术生成

如何抓取土豆网的视频原文件
以前一直以为抓取flv或者swf的文件都是直接看html的代码，但是发现土豆的没办法找到，一直郁闷不知道如何处理，今天终于找到实现这些抓取的原理，看来要对http协议好好研究研究才行了。

象土豆网这样的视频文件是无法用迅雷直接抓取原文件的，因为其采用的是flash flv文件格式，通过迅雷抓取的只是一个个性化的flv播放器。 icekernel的意见是通过查看ie缓存，显然还有更好的办法。下面给出典型的数据包顺序，以 http://www.toodou.com/v/kV5FNAWE4RY这个原url为例说明。

1.GET /v/kV5FNAWE4RY，Location
---------------------------------------------------------------------------------------------------------------------
GET /v/kV5FNAWE4RY HTTP/1.1
Accept: image/gif, image/x-xbitmap, image/jpeg, image/pjpeg, application/vnd.ms-excel, application/vnd.ms-powerpoint, application/msword, application/x-shockwave-flash, */*
Accept-Language: zh-cn
Accept-Encoding: gzip, deflate
User-Agent: Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.1; SV1; .NET CLR 2.0.50727; InfoPath.1)
Host: www.toodou.com
Connecti