gnipgnoy-CSDN博客

原创 re 模块与正则表达式（实验楼学习笔记3）

re是Python自带库，该库使python语言拥有了全部的正则表达式功能。关于正则表达式在Python爬虫中的重要性，你可以把它上升到和HTML+JS的高度，如果你想对爬虫有比较深入的理解，正则表达式是必备技能之一。这里，我们的核心是利用第三方库提高我们的爬虫编写速度，故对正则表达式部分，仅仅是简单介绍。...

2022-07-15 15:01:53 235 1

原创爬虫未来学习方向（实验楼最后一章节）

基础部分学完后，学习方向是从基础部分提高，到爬虫框架，到手机APP爬虫，再到分布式爬虫，每个领域都需要投入精力去学习与研究。为了不让你迷失到爬虫世界里，这里为你梳理了一条最简单、最直接的技术线。。...

2022-07-14 20:47:08 215

原创 Beautiful Soup 基础入门（实验楼学习笔记2）

接下来将学习用 Beautiful Soup 库来实现数据抓取。将会通过爬取世界大学校园排名和蓝桥云课课程的数据来讲解 Beautiful Soup 库的基础知识。它包括如何用 Beautiful Soup 库的解析器去解析页面内容、如何遍历和搜索标签树、如何提取出关键的数据并保存到列表或者字典里Beautiful Soup 库简单来说，就是一个可以从 HTML 或 XML 文件中提取数据的 Python 库。本次实验中，第一个例子是在软科上去爬取 2021年软科类世界大学排名的数据。爬取的内容如下图所示

2022-07-13 10:55:43 385

原创 requests 库 get 方法详解（实验楼学习笔记1）

requests.get 方法是一种发起网络请求的方式，如果你对 HTML 和 JS 语言有所了解，这部分内容应该非常熟悉，和 get 方法类似的还有 post、 put、 delete、 head、 options，主要掌握get 与 post对于一个方法而言，最重要的就是它的参数，在 get 方法中，主要参数如下：url，请求地址，必填项headers，请求头，非必填params，请求参数，非必填proxies，代理 IP，非必填verify，SSL 验证，非必填，主要用在访问 https 协

2022-07-13 10:30:56 3139

原创迭代器、生成器、装饰器

目录迭代器生成器生成器表达式闭包装饰器迭代器Python 迭代器（_Iterators_）对象在遵守迭代器协议时需要支持如下两种方法。__iter__()，返回迭代器对象自身。这用在for和in语句中。 __next__()，返回迭代器的下一个值。如果没有下一个值可以返回，那么应该抛出StopIteration异常。 class Counter(object): ......

2021-10-10 21:41:54 88

原创 init 方法

类的实例化使用函数符号。只要将类对象看作是一个返回新的类实例的无参数函数即可。例如（假设沿用前面的类）:>>> class MyClass(object):... """A simple example class"""... i = 12345... def f(self):... return 'hello world'x = MyClass()以上创建了一个新的类实例并将该对象赋给局部变量 x。这个实例化操作创建一.

2021-10-09 15:54:35 125

原创字符串的方法（几个常用内置公式）

>>> s = "shi yan lou">>> s.title()'Shi Yan Lou'方法title()返回字符串的标题版本，即单词首字母大写其余字母小写>>> z = s.upper()>>> z'SHI YAN LOU'>>> z.lower()'shi yan lou'方法 upper() 返回字符串全部大写的版本，反之 lower() 返回字符串的全部小写版本。&g...

2021-10-07 09:43:23 212

原创阿里云天池------python 训练营笔记----数据结构大汇总（2）

阿里云天池------python 训练营笔记----数据结构大汇总（2）天池地址4. 字符串格式化format 格式化函数str8 = "{0} Love {1}".format('I', 'Lsgogroup') # 位置参数print(str8) # I Love Lsgogroupstr8 = "{a} Love {b}".format(a='I', b='Lsgogroup') # 关键字参数print(str8) # I Love Lsgogroupstr8 = "{

2020-09-22 21:14:46 706

原创阿里云天池------数据结构大汇总 second day

阿里云天池------数据结构大汇总 -----元组阿里云天池地址python修炼之道电子书闲话最近电脑坏了，就好几天没打卡，虽然说没打卡拿不到证书，可学习是自己的事情啊。证书不过就是努力后的奖励而已。这是数据结构的第二天，先前做过了列表，接下来我们说一下元组 tuple。元组「元组」定义语法为：(元素1, 元素2, …, 元素n)小括号把所有元素绑在一起逗号将每个元素一一分开**1. 创建和访问一个元组**Python 的元组与列表类似，不同之处在于tuple被创建后就不能对其进

2020-09-17 18:49:21 438

原创阿里云天池python笔记（中2）

阿里云天池python笔记（中2）电脑选择，想自我学习编程有条件直接上mac没条件的创造条件也要上个游戏本，轻薄本真的差，搞了半天电脑，快吐血了

2020-09-11 23:43:00 84

原创 python 入门（中）——阿里云天池训练营

python 入门（中）——阿里云天池训练营阿里云天池链接：https://tianchi.aliyun.com/specials/promotion/aicamppythonpython简介Python 是一种通用编程语言，其在科学计算和机器学习领域具有广泛的应用。如果我们打算利用 Python 来执行机器学习，那么对 Python 有一些基本的了解就是至关重要的。本 Python 入门系列体验就是为这样的初学者精心准备的。对于初学者而言，python相比于其他编程语言，可以说是相当友好了，语法简单

2020-09-09 21:08:08 137

原创 PYTHON 阿里云天池训练营笔记

PYTHON 阿里云天池训练营笔记附带天池链接：https://tianchi.aliyun.com/specials/promotion/aicamppython一、.变量、运算符与数据类型1.注释：在 Python 中，# 表示注释，作用于整行。‘’’ ‘’’ 或者 “”" “”" 表示区间注释，在三引号之间的所有内容被注释2. 运算符算术运算符比较运算符：逻辑运算符：位运算符：其他运算符：注意：is, is not 对比的是两个变量的内存地址==, != 对比的

2020-09-08 21:39:36 211

gnipgnoy的博客