- 博客(3)
- 收藏
- 关注
原创 初识爬虫(一)
爬虫 爬虫概念: 爬虫模拟客户端发送请求, 接受响应,按照一定的规则 ,自动抓取互联网程序 原则上 客户端 能做的事情 , 爬虫都可以做 爬虫作用: 数据采集 软件测试 网站投票等 爬虫流程: 获取一个 url 地址 向目标 url 地址发送请求,并获取响应 如果从响应中提取 url 地址,则继续发送请求 获取响应 如果从响应中提取数据,则将数据进行保存 requests模块: 通过使用requests 模拟发送请求 已虚拟环境为例: pip install requests 查看虚拟环境
2020-11-12 16:44:28 155 1
原创 初始 闭包和装饰器
闭包 闭包含义 在函数嵌套的前提下,内部函数使用外部函数的变量,并且外部函数返回内部函数,我们把这个使用外部函数变量的内部函数叫做闭包 闭包构成 在函数嵌套的情况下 内部函数使用外部函数的变量 外部函数返回内部函数 代码实现 闭包的作用 闭包可以保存外部函数内的变量,不会随着外部函数调用完而销毁 闭包可以提高代码的可重用 闭包修改外部变量 注意!!! 修改闭包内使用的外部变量使用nonlocal关键字来完成!!! 装饰器 装饰器定义 给已有函数增加额外的函数,他的本质就是一个闭包函数 装饰器的外
2020-11-03 10:34:48 109
原创 初识线程与进程
进程 一个正在运行的程序或者软件就是一个进程,是操作系统资源分配的基本单位,每启动一个进程,操作系统就会给其分配一定的运行资源保证进程的运行 多进程效果图 多进程的使用 进程包 进程类 进程编号 进程类创建实例对象的方法和属性 进程执行带有参数的任务 进程包 进程类 结果: 进程类创建实例对象的三种方法 process.start() : 启动子进程实例(创建子进程) process.join() : 等待子进程执行结束 process.terminate(): 不管任务是否完成,立即终止子进程
2020-10-27 18:05:10 147
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人