- 博客(2)
- 问答 (1)
- 收藏
- 关注
RSS订阅原创 爬虫初学：爬取小说网小说（详细讲解）
项目展示在讲解项目之前，先给你们展示一下功能，不然看了半天，结果不是自己想要的那不是自闭了。<----------------------------------分割线------------------------------------->点击打开原图说实话，感觉我挺憨的才能写出这种代码，谁下载小说不是一整本一整本下，结果也就我傻大憨的一章一章下，甚至还觉得自己好牛，害代码思路讲解项目要用到的模块import osfrom time import sleep
2021-09-16 19:09:55
3147
转载 《学习scrapy框架爬小说》的进一步完善
一、完善目标：1、为方便使用，把小说拼音或英文名，小说输出中文名，第一章节url地址变量化，修改这些参数即可爬取不同的小说。2、修改settings.py设置文件，配置为记录debug的log信息，以方便排错。3、修改字符集编码，解决部分网页有emoji符号，导致无法把爬取的网页内容存入数据表的问题。（如：http://67bqg.com/zhongshengzhichuanqirensheng/页面出现了emoji符号）二、实施过程1、修改pipelines.py文件：(pytho
2021-09-16 17:13:16
134
空空如也
网站seo怎么做，新站俩月了百度也没有收录呢。
2021-09-16
TA创建的收藏夹 TA关注的收藏夹
TA关注的人