爬虫
Young Panda
初来乍到,请多多指教
展开
-
Python设计爬虫任务队列
from queue import Queue import urllib3 urllib3.disable_warnings(urllib3.exceptions.InsecureRequestWarning) class CrawlQueue(object): def __init__(self, items, args): self.max_failure ...原创 2020-02-03 18:41:47 · 345 阅读 · 0 评论 -
python3爬取m3u8视频
爬m3u8文件,解析所有ts的url,爬取ts保存至本地,合并为完整文件。 附上直接可以用的代码 import requests import urllib3 import re import os urllib3.disable_warnings(urllib3.exceptions.InsecureRequestWarning) def getTsUrls(m3u8_url) -&...原创 2020-02-03 18:39:00 · 1553 阅读 · 0 评论