![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Python基础
文章平均质量分 91
Leer_weini
这个作者很懒,什么都没留下…
展开
-
学习笔记 -- Python爬虫 - selenium
本文记录selenium的用法及安装, 具体理论和详细内容请参考: https://cuiqingcai.com/5627.htmlhttp://www.testclass.net/selenium_python/mouse-eventselenium安装1. 安装 selenium 打开 cmd : pip install selenium2. 下载浏览器驱动在这里提供三个常用的下载地址(更多的浏览器驱动请查看首行第二个链接):ChromedriverFirefoxdriv.原创 2020-12-03 09:41:43 · 638 阅读 · 1 评论 -
学习笔记 -- Python爬虫 - cookie session 和 代理ip
#内容为视频笔记及个人理解,若有错误还望各位大佬指正http及https特性: 无状态当我们使用程序向服务器发出请求时, 如果页面中含有登录信息, 那么我们再次访问该页面时仍然会抛出登录提示, 因为服务器并不会记录我们在网页当中记录的操作, 这就是 无状态 (即使我们在同一个程序中已经登陆过)cookie用来让服务器端记录客户端的相关状态当我们登录访问一个网页时, 服务器端会返回一个 cookie 用来识别发出请求的是谁, cookie 由服务器创建, 保存在客户端, cookie.原创 2020-11-28 19:48:50 · 313 阅读 · 0 评论 -
学习笔记 -- Python爬虫 - 数据解析之xpath
#内容为视频笔记及个人理解,若有错误还望各位大佬指正xpathxpath 通过将源码实例化为一个对象来进行处理如何实例化一个对象通过将本地的html文档中的源码数据加载到etree对象中etree.parse(filepath)将互联网上获取的源码数据加载到该对象...原创 2020-11-28 09:20:30 · 192 阅读 · 0 评论 -
学习笔记 -- Python爬虫 - 数据解析之bs4
#内容为视频笔记及个人理解,若有错误还望各位大佬指正聚焦爬虫建立在通用爬虫的基础之上, 提取网页当中的部分内容, 学习中共记录了三种提取的办法正则表达式bs4Xpath正则表达式 (案例1)要求: 爬取糗事百科的图片import requestsimport reimport osdef get_pic(num_): for num in range(1, num_+ 1): url = "https://www.qiushibaike.c.原创 2020-11-26 14:53:16 · 326 阅读 · 0 评论 -
学习笔记 -- Python爬虫 - 数据解析之正则表达式
#内容为视频笔记及个人理解,若有错误还望各位大佬指正聚焦爬虫建立在通用爬虫的基础之上, 获取页面当中指定的局部数据指定url发起请求获取响应数据数据解析持久化存储数据解析正则bs4xpath数据解析原理概述解析的局部的文本内容都会在标签之间或者标签对应的属性当中进行指定标签的定位标签或者标签对应的属性中存储的数据值进行提取(解析)数据解析 – 正则表达式(部分常用正则表达式) 单字符字符作用.除换行符以外的所有字符.原创 2020-11-24 23:22:28 · 244 阅读 · 0 评论 -
学习笔记 -- Python爬虫 - requests模块(通用爬虫)
#内容为视频笔记及个人理解,若有错误还望各位大佬指正requests模块python中原生的一款基于网络请求的模块, 能够模拟浏览器发出请求。 指定 URL发出请求获取响应数据持久化存储import requestsurl = "https://www.sogou.com" # 指定URlresponse = requests.get(url=url) # 发出请求 并接收 get 所返回的响应对象page_text = response.text .原创 2020-11-21 17:52:31 · 263 阅读 · 0 评论 -
学习笔记 -- Python基础 - 数据类型
数据类型#内容为个人理解,如果存在错误请大佬指正变量 下方的 x 就是一个 变量 的 名称(也叫做"标识符") ,相当于是一个数据的 壳 通过这个 壳 的 名称 可以访问到它 存储的数据用来 存储数据 的 容器x = 1变量的名称必须由 字母 , 下划线 ,中文(python 3) 及 数字 组成 , 不能以 数字 作为开头数字类型整数(int)表示一串 整数 数字浮点数(f原创 2020-11-18 11:36:03 · 143 阅读 · 0 评论