- 博客(3)
- 收藏
- 关注
RSS订阅原创 利用Mongodb数据库存储scrapy框架下爬虫爬取的小说文件
准备 先在终端输入pip install pymongo安装第三方库 并设置好Mongodb的环境变量 启用 用管理员权限打开cmd，输入mongod.exe --dbpath=C:\data\db（取决于你的db文件夹目录）启用Mongodb服务 启动后不要关闭窗口，另外打开一个cmd输入mongo，这样我们就可以使用数据库了 （可以在浏览器输入http://localhost:27017/来查...
2020-02-23 23:49:35
323
原创 在Scrapy框架内实现随机更换UA（用户代理）功能
准备工作 在终端中输入pip install fake-useragent来安装fake-useragent模块 待安装完成后进行下一步 启用随机更换UA功能 先打开middlewares.py文件，在其最后导入fake-useragent模块 from fake_useragent import UserAgent class RandomUserAgentMidddlware(object)...
2020-02-23 22:43:45
452
原创 TCP/IP协议解析
关于TCP/IP，ARP工作机制，路由和DHCP的理解关于TCP/IP，ARP工作机制，路由和DHCP的理解TCP/IPARP工作机制/ARP（Address Resolution Protocol）地址解析协议DNS 解析如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是...
2019-11-12 22:05:59
385
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人