爬取东方财富股吧中评论数据
东方财富股吧是有反爬取机制的,我们通过减慢爬取速率的方法来避免爬取检测。这种方法爬取网页数据的速率很慢,并不会对网站的访问造成影响,当然我们可以改进方法,使得爬取数据更快。但并不鼓励大家非法爬取数据,只用作学习交流。直接上代码吧:import requestsfrom bs4 import BeautifulSoupimport timeimport randomimport csv # 导入CSV安装包#f = open('test.csv', 'w', encoding='utf-8'
原创
2020-10-12 23:28:29 ·
7877 阅读 ·
16 评论