![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫
想想uzi会怎么做7
这个作者很懒,什么都没留下…
展开
-
scrapy框架----爬取B站番剧弹幕
items.py文件定义要爬取的数据的字段import scrapyclass bilidanmu(scrapy.Item): danmu = scrapy.Field() #弹幕 cid = scrapy.Field() #番剧的标识,每个番的每一集cid不同 set_name = scrapy.Field() #储存在MongoDB的数据库spider.py爬取页面并解析,首先要拿到每一部番的cid,这个打开f12,ctrl+F筛选出cid,拿最爱的炮姐的举原创 2020-06-04 16:44:35 · 1443 阅读 · 5 评论 -
用selenium和BeautifulSoup爬取网易云音乐歌手id
本人正在点亮爬虫技能树,写blog以记录selenium和bs4介绍Selenium 自动化测试工具。它支持各种浏览器,包括 Chrome,Safari,Firefox 等主流界面式浏览器,如果你在这些浏览器里面安装一个 Selenium 的插件,那么便可以方便地实现Web界面的测试。换句话说叫 Selenium 支持这些浏览器驱动。Beautiful Soup提供一些简单的、python式...原创 2020-03-09 19:22:20 · 946 阅读 · 1 评论