- 博客(5)
- 收藏
- 关注
原创 scrapy学习笔记
ScrapyCiallo~(∠・ω< )⌒★一、概念和流程1.概念 Scrapy是一个python编写的开源异步网络爬虫框架,可以以少量的代码进行快速高效的爬取2.工作流程Scrapy工作流程名称作用实现Scrapy Engine(Scrapy引擎)整个框架的核心,负责控制数据和信号在不同模块间的传递Scrapy内置Scheduler(调度器)一个队列,存放引擎发过来的request请求,接收从引擎发来的url,并将url加入队列Scrapy内置
2024-08-14 16:55:09 1235
原创 Docker学习笔记
数据卷(volume)是一个虚拟目录,是容器内目录与宿主机目录之间映射的桥梁由于容器只满足应用运行的需求,故里面通常都不会有vim之类的工具帮助修改容器内的文件内容,且我们将直接资源传入容器十分的麻烦。而数据卷可以帮助我们将容器内的目录映射到宿主机上面,使得我们可以直接通过修改宿主机目录下的文件来改变容器内文件内容对于一个容器(这里以nginx为例)我们使用Nginx部署静态网站时,通常需要修改如下文件但是由于容器内不含vim编辑器,所以我们无法使用命令。
2024-08-10 10:25:13 1007
原创 Redis超快速入门
Redis全称Remote Dictionary Server,远程词典服务器,是一个基于内存的键值型NoSQL数据库。Redis是一个key-value的数据库,key一般是String类型所属例String基本类型Hash基本类型List基本类型[A->B->C]Set基本类型{A,B,C}SortedSet基本类型GEO特殊类型BitMap特殊类型HyperLog特殊类型在Redis中,我们可以通过help。
2024-08-06 17:08:06 629
原创 Python爬虫学习笔记
requests是python中进行网络请求的一个常用的第三方库,他是基于python内置的HTTP请求库urllib而编写的,他对urllib进行了封装,使得python发送HTTP请求更加简便。 通过即可安装该库,通过即可导入到文件中。 正则表达式(Regular Expression,简称 regex 或 regexp)是一种用于匹配字符串中字符组合的模式。正则表达式广泛用于搜索、替换、分割字符串等操作。 正则表达式可以通过特定的字符组合来匹配符合某一格式的字符。
2024-05-30 18:28:34 1157
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人