![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Python试水
Static_sys
啥子都要弄抻透
展开
-
爬虫+Python_抻透
1、爬虫架构: 2、运行流程: 3、URL管理器 3.1 功能 1)将新URL添加到爬取列表 2)判断是否重复 3)获取待爬取URL 4)判断是否有待爬取内容 5)将URL从待爬取到已爬取 3.2 实现方式 1)内存:set() 方法 2)关系数据库 3)缓存数据库redis:set 4、网页下载器 4.1 功能 将互联网的URL解析成HTML文件,存储到本地文件或内存字符串 4.2 基本插件...原创 2019-04-12 20:26:47 · 142 阅读 · 0 评论 -
python_抻透
1、python优点 优点:解释性、动态、面向对象、语法简洁、开源、丰富的资源社区 缺点:执行慢、GIL锁限制并发、python2和python3不兼容 2、列表(list)和元组(tuple)、字典 1)列表是一种有序的序列,可以随时添加和删除其中的元素,以“[ ]”包围的数据集合,列表可以包含任何数据类型,也可以包含一个列表。 2)元组是一种特殊列表,一旦建立就不能改变,以“( )”包围的数据...原创 2019-04-29 10:13:42 · 282 阅读 · 0 评论