- 博客(2)
- 问答 (1)
- 收藏
- 关注
RSS订阅原创 爬虫初学：爬取小说网小说（详细讲解）
项目展示 在讲解项目之前， 先给你们展示一下功能， 不然看了半天， 结果不是自己想要的那不是自闭了。 <----------------------------------分割线-------------------------------------> 点击打开原图 说实话，感觉我挺憨的才能写出这种代码，谁下载小说不是一整本一整本下， 结果也就我傻大憨的一章一章下，甚至还觉得自己好牛，害 代码思路讲解 项目要用到的模块 import os from time import sleep
2021-09-16 19:09:55
3212
转载 《学习scrapy框架爬小说》的进一步完善
一、完善目标： 1、为方便使用，把小说拼音或英文名，小说输出中文名，第一章节url地址变量化，修改这些参数即可爬取不同的小说。 2、修改settings.py设置文件，配置为记录debug的log信息，以方便排错。 3、修改字符集编码，解决部分网页有emoji符号，导致无法把爬取的网页内容存入数据表的问题。（如：http://67bqg.com/zhongshengzhichuanqirensheng/页面出现了emoji符号） 二、实施过程 1、修改pipelines.py文件： (pytho
2021-09-16 17:13:16
172
空空如也
网站seo怎么做，新站俩月了百度也没有收录呢。
2021-09-16
TA创建的收藏夹 TA关注的收藏夹
TA关注的人