python好用 appium fiddler_使用python-requests+Fiddler4+appium爬虫,批量爬取抖音小视频

抖音很火，大家都知道，楼主决定使用python爬取抖音小视频，人家都说天下没有爬不到的数据，so，楼主决定试试水，纯属技术爱好，分享给大家。。

1.楼主首先使用Fiddler4来抓取手机抖音app这个包，具体配置的操作，网上有很多教程供大家参考。

上面得出抖音的视频的url，这些url均能在网页中打开，楼主数了数，这些url的前缀有些不同，一共有这4种类型：

v1-dy.ixigua.com

v3-dy.ixigua.com

v6-dy.ixigua.com

v9-dy.ixigua.com

楼主查看这四种类型得知，v6-dy.ixigua.com 这个前缀后面的参数其中有一个是Expires(中文含义过期的意思)

Expires=1536737310，这个是时间戳，标记的是过期的时间如下图所示，过了15:28分30秒，则表示url不能使用，楼主算了一下，url有效期是一个小时。

看到这些url，楼主不能手动一个一个粘贴，so楼主使用如下代码，自动保存到一个txt文档中。

//保存到本地添加开始

//这是抖音的地址||"v1-dy.ixigua.com"||"v3-dy.ixigua.com"||"v6-dy.ixigua.com"||"v9-dy.ixigua.com"||

if (oSession.fullUrl.Contains("v1-dy.ixigua.com")||

oSession.fullUrl.Contains("v3-dy.ixigua.com")||

oSession.fullUrl.Contains("v6-dy.ixigua.com")||

oS