scrapy 简单爬取笔趣阁并保存为txt
scrapy 简单爬取笔趣阁并保存为txt
作为一个老书虫,每个寂寞的夜总要本书陪着才能入眠
话不多说直接开始
解决两个主要的问题
1.输出pipelines时章节乱序
2.字符编码
直接上代码
爬取部分.
import scrapy
from one.items import QuBiGe
class HomeSpider(scrapy.Spider):
name = 'qubige'
allowed_domains = ['www.biquge.info']
start_ur
原创
2020-07-28 18:30:25 ·
2345 阅读 ·
0 评论