count distinct和group by一起用_爬虫篇 | 用Python爬超级搞笑的视频

最近整理一个爬虫系列方面的文章，不管大家的基础如何，我从头开始整一个爬虫系列方面的文章，让大家循序渐进的学习爬虫，小白也没有学习障碍.爬虫篇：使用Python动态爬取某大V微博，再用词云分析实战篇 | 用Xpath,bs4,正则三种方式爬51job 爬虫篇 | 动态爬取QQ说说并生成词云，分析朋友状况 爬虫篇 | 200 行代码实现一个滑动验证码 爬虫篇 | 学习Selenium并使用Selenium模拟登录知乎 爬虫篇 | Python使用正则来爬取豆瓣图书数据 爬虫篇 | 不会这几个库，都不敢说我会Python爬虫 爬虫篇 | Python现学现用xpath爬取豆瓣音乐 爬虫篇 | Python最重要与重用的库Request 爬虫篇 | Python爬虫学前普及 基础篇 | Python基础部分

这两天看到别人用Python下载视频，于是我也来试一下平时总是喜欢看内涵段子。这里正好有内涵视频:http://neihanshequ.com/video/

github源码地址：https://github.com/pythonchannel/python27/blob/master/dyamic/download_video

打开网址：http://neihanshequ.com/video/

开始分析：

1. 数据方式 按下F12 可以看到 Network中 response返回的数据都是用html渲染好的，所以这样的数据，你没有办法直接获取到他的数据，你只能通过他对应的实际网址来抓取你需要的数据

   

2. 视频字段 再分析网页源代码，可以找到视频对应的地址，获取把地址拿出来放到迅雷中下载，然后发现可以果然可以播放，这说明这个地址是没有错误的