Python#爬虫
予微胡不归
莫得办法,难啊。
展开
-
利用正则表达式爬取网络小说,并按照章节下载到本地
利用正则表达式爬取网络小说,并按照章节下载到本地 闲来无事,尝试了使用正则表达式爬取了某个明显没有反扒机制的小说网站,其实也是刚刚接触爬虫,第一次从网络上爬到感兴趣的东西还是令人开心的。 先贴为敬。 import re import requests from multiprocessing.dummy import Pool import os # 共有网址 start_url = 'http...原创 2019-10-14 21:07:26 · 1290 阅读 · 0 评论 -
Python3爬虫获取数据后写入CSV文档遇到中文乱码问题
首次利用python3编写爬虫程序,按部就班的做好所有工作之后,发现写入到CSV文件中的中文为乱码,查找资料之后,需要在打开准备写入的CSV文件时将编码格式更改。 with open('tieba.csv', 'w', encoding = 'UTF-8-sig') as f: writer = csv.DictWriter(f, fieldnames=['username', 'con...原创 2019-10-11 22:19:02 · 1178 阅读 · 1 评论