python梨视频爬虫下载,反反爬
跟着b站视频学习,发现和视频里面讲的不一样
视频URL改成ajax异步请求得到的
拿到视频url之后发现居然是个假链接不是真实的
仔细观察真实的视频url发现,刚才异步请求到的视频链接和图片链接拼接成的缝合怪
正则处理一下就能愉快的下载视频了
import requests
from lxml import etree
from multiprocessing.dummy import Pool
import re
import random
import time
seesion=requests.session()
headers = {
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64; rv:48.0) Gecko/20100101 Firefox/48.0'
}
def get_vide(dic):
url = dic['url']
name = dic['name']
time.sleep(random.random())
# print(url)
data = seesion.get(url=url,headers=headers).content
print