菜鸡瞎讲

原创 scrapy爬取使用jsonp技术的网页

爬取bilibili的视频页面时，发现一个问题，就是up主、视频title、视频超链接等都能爬取到，但是却无法直接爬取到其播放量、硬币数等等参数，通过抓包我们可以发现，bilibili.com直接返回的html页面中，这几个我们比较关心的参数都没有被渲染进来：<div class="v-title-info"> <div class="v-title-line"><i cla