Python入门教程笔记

最新推荐文章于 2021-11-12 22:23:12 发布
最新推荐文章于 2021-11-12 22:23:12 发布
阅读量182 收藏
点赞数 1
分类专栏： 笔记
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_45570742/article/details/117574286
版权

1.爬虫技术怎么学

在这里插入图片描述

2.http和https基础知识

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

3.requests模块入门

中文文档: https://docs.python-requests.org/zh_CN/latest/
在这里插入图片描述

http方法

requests模块支持的http方法

  • get
  • post
  • pull
  • delete
  • head
  • trace
  • options
  • connect

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

get请求方法

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

import requests
response = requests.get(url='http://httpbin.org/ip')
print(response.text)
# 输出结果：
# {
#   "origin": "211.142.27.39"
# }
print(response.content)
# 输出结果：b'{\n  "origin": "211.142.27.39"\n}\n'

post方法

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

import requests
response = requests.get(url='http://httpbin.org/post',data={'name':'baidu'})
print(response.text)
# 输出结果：（不知道什么原因）
# <!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 3.2 Final//EN">
# <title>405 Method Not Allowed</title>
# <h1>Method Not Allowed</h1>
# <p>The method is not allowed for the requested URL.</p>

url构造方法

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

url代码练习

import requests
# 主要用在get请求里
data = {'key1':'value1','key2':'value2'}
response = requests.get(url='http://httpbin.org/get',params=data)
# 查看当前请求的url是谁
print(response.url)
# 输出结果：http://httpbin.org/get?key1=value1&key2=value2
print(response.headers)
# 输出结果：{'Date': 'Thu, 03 Jun 2021 03:40:25 GMT', 'Content-Type': 'application/json', 'Content-Length': '377', 'Connection': 'keep-alive', 'Server': 'gunicorn/19.9.0', 'Access-Control-Allow-Origin': '*', 'Access-Control-Allow-Credentials': 'true'}

响应图片

在这里插入图片描述
在这里插入图片描述

代码练习

import requests
url = 'https://www.imooc.com/static/img/index/logo2020.png'
response = requests.get(url)
# 查看图片的二进制数据
print(response.content)
with open('imooc.png','wb') as f:
    # 写入图片数据
    f.write(response.content)

常用请求

• response.url
• response.status_code
• response.text
• response.content
• response.content.decode()
• response.content.decode("gbk")
• response.headers
• response.json()
• response.request.headers
• response.cookies

请求代码练习

import requests
response = requests.get(url='http://httpbin.org/ip')
print(response.content)
# 输出结果：b'{\n  "origin": "211.142.27.39"\n}\n'
print(response.text)
# 输出结果：
# {
#   "origin": "211.142.27.39"
# }
print(type(response.text))
# <class 'str'>
print(response.json())
# 输出结果：{'origin': '211.142.27.39'}
print(response.json()['origin'])
# 输出结果：211.142.27.39
# 查看请求头
print(response.request.headers)
# 输出结果：
# {'User-Agent': 'python-requests/2.25.0', 'Accept-Encoding': 'gzip, deflate', 'Accept': '*/*', 'Connection': 'keep-alive'}
print(type(response.request.headers))
# 输出结果：<class 'requests.structures.CaseInsensitiveDict'>
print(response.cookies)
# 输出结果：<RequestsCookieJar[]>

import requests
url = 'http://www.baidu.com'
response = requests.get(url)
print(response.status_code)
print(response.text)    # 输出内容有乱码
print(response.content.decode())
print(type(response.content.decode()))  # 输出为"str"
html_str = response.content.decode()
print(type(html_str))
with open('baidu.html','w',encoding='utf-8') as f:
     f.write(response.content.decode())
print(response.url)
print(response.headers)
print(response.content)
print(type(response.content))   # 二进制数据
print(response.json())
print(response.request.headers)

4.requests模块进阶

查看cookies

在这里插入图片描述

import requests
# 查看cookies
url = 'http://www.baidu.com'
response = requests.get(url)
print(response.headers)
# 输出结果：
# {'Cache-Control': 'private, no-cache, no-store, proxy-revalidate, no-transform', 'Connection': 'keep-alive', 'Content-Encoding': 'gzip', 'Content-Type': 'text/html', 'Date': 'Thu, 03 Jun 2021 03:59:48 GMT', 'Last-Modified': 'Mon, 23 Jan 2017 13:27:36 GMT', 'Pragma': 'no-cache', 'Server': 'bfe/1.0.8.18', 'Set-Cookie': 'BDORZ=27315; max-age=86400; domain=.baidu.com; path=/', 'Transfer-Encoding': 'chunked'}
print(response.cookies)
# 输出结果：<RequestsCookieJar[<Cookie BDORZ=27315 for .baidu.com/>]>
print(response.cookies['BDORZ'])
# 输出结果：27315

cookie代码练习2

在这里插入图片描述
在这里插入图片描述

import requests
url = 'http://httpbin.org/cookies'
response = requests.get(url)
print(response.text)
# 输出结果：
# {
#   "cookies": {}
# }
# 通过dict进行实例化cookies
cookies = dict(cookies_are='hello imooc')
# 请求的时候要带上cookies
response = requests.get(url,cookies=cookies)
print(response.text)
# 输出结果：
# {
#   "cookies": {
#     "cookies_are": "hello imooc"
#   }
# }

证书校验

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

import requests
# 关闭SSL校验
response = requests.get(url='http://www.baidu.com',verify=False)
print(response.text)

异常

在这里插入图片描述
在这里插入图片描述

超时参数

import requests
# 超时参数timeout
start_time = time.time()
# 一般设置为2-3秒
response = requests.get(url='https://www.imooc.com/',timeout=2)
print(response.text)
end_time = time.time()
print(end_time-start_time)

清除缓存

学习网址
http://account.chinaunix.net/login
第一步，更多工具–>清除浏览数据
在这里插入图片描述
在这里插入图片描述

在线工具

时间戳转换：https://tool.lu/timestamp/
时间戳：1603521445734 后3位删掉进行转换
在这里插入图片描述
set-cookies
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

代码练习

代理信息

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

5.xpath基础语法

什么是xpath

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
xpath helper安装方法
• 更多工具–>扩展程序–>chrom应用商店
在这里插入图片描述
在这里插入图片描述

6.lxml模块

什么是lxml库

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

代码练习1

from lxml import etree
# 不包含html标签和body标签
data = """
<div>
    <ul>
        <li class="item-0"><a href="link1.html">first item</a></li>
        <li class="item-1"><a href="link2.html">second item</a></li>
        <li class="item-3"><a href="link3.html">third item item</a></li>
        <li class="item-4"><a href="link4.html">fouth item</a></li>
    
    </ul>
</div>
"""
# 添加了html和body标签
html = etree.HTML(data)
print(html)
# 输出结果：<Element html at 0x1db5588>
print(etree.tostring(html).decode())

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

代码练习2

from lxml import etree
# 不包含html标签和body标签
data = """
<div>
    <ul>
        <li class="item-0"><a href="link1.html">first item</a></li>
        <li class="item-1"><a href="link2.html">second item</a></li>
        <li class="item-3"><a href="link3.html">third item item</a></li>
        <li class="item-4"><a href="link4.html">fouth item</a></li>
    
    </ul>
</div>
"""
# 添加了html和body标签
html = etree.HTML(data)
print(html)
# 输出结果：<Element html at 0x1db5588>
print(etree.tostring(html).decode())
print(html.xpath('//li'))
# 输出结果：[<Element li at 0x291d208>, <Element li at 0x291d1c8>, <Element li at 0x291d2c8>, <Element li at 0x291d308>]
print(html.xpath('//li/@class'))
# 输出结果：['item-0', 'item-1', 'item-3', 'item-4']
print(html.xpath('//li/@class="item-0"'))
print(html.xpath("//li/@class='item-0'"))
# 输出结果：True
print(html.xpath('//li/a[@href="link1.html"]'))
# 输出结果：[<Element a at 0x3009348>]
print(html.xpath('//li[2]/a[1]'))
print(html.xpath('//li[last()-1]/a/@href'))
# 输出结果：['link3.html']

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

7.安装mongodb数据库

安装数据库
第一步，查看是否安装成功
netstat -an
在这里插入图片描述

第二种方式查看是否成功
在这里插入图片描述
在这里插入图片描述

第三步，修改ip地址
bin文件夹没找到cfg文件，修改接口ip地址0.0.0.0
在这里插入图片描述
在这里插入图片描述

再次进去服务，点击数据库重启动
在这里插入图片描述

第四步，查看地址是否修改成功
在这里插入图片描述

8.使用Navicat连接mongodb数据库

第一步，安装
在这里插入图片描述

第二步，配置连接数据库
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

点击测试
在这里插入图片描述

第三步，新建查询
在这里插入图片描述

第四步，几个命令查询
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

清风喜雨
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
零基础小白的Python入门教程笔记
Python8年程序员教程分享
07-05 1223
如今绝大多数互联网公司（谷歌、腾讯、阿里、百度、知乎等）的很多职位要求应聘者必须具有 Python技能；学会了 Python 等于手握他们的敲门砖
Python基础教程笔记
04-09
Python基础教程PDF版 可以通过链接直接访问：http://doubibiji.com/#/python/01-Python%E7%AE%80%E4%BB%8B/01-Python%E7%AE%80%E4%BB%8B 如果有帮助，麻烦给个好评！！！
python新手入门笔记_[新手必备]Python 基础入门必学知识点笔记
weixin_29927965的博客
02-10 215
Python 作为近几年越来越流行的语言，吸引了大量的学员开始学习，为了方便新手小白在学习过程中，更加快捷方便的查漏补缺。根据网上各种乱七八糟的资料以及实验楼的 Python 基础内容整理了一份极度适合新手小白的 Python 基础入门必学知识点笔记。1. 换行与缩进1. 1条代码为1行，例如：1个赋值、1个请求、1个运算、1个打印，结尾不需要添加任何标点符号。2. 根据代码的执行逻辑进行区分，同...
python基础教程笔记1
Starr
01-24 923
python基础教程 基础 列表和元组 字符串 字典 条件循环和其它语句 python基础教程 1.基础 1/2==0 1.0/2==0.5 1.0//2==0.0 2**3==8 cmath.sqrt(-1)==1j repr("hello")=="'hello'" str("hello")=="hello" 长字符串 '''this is a long
python入门基本笔记_Python入门基础知识笔记
weixin_34802266的博客
01-29 203
点击蓝字“python教程”关注我们哟！ 冯诺依曼架构控制器运算器存储器输入设备 (I)输出设备 (O)CPU——控制器，运算器 # 运算器只与内存交换数据内存——存储器硬盘——输入设备，输出设备(向存储器输入数据，写入存储器输出的数据)键盘，鼠标——输入设备(向计算机输入指令显示器，打印机，音响等——输出设备 python的语言类型python是动态语言，强类型语言静态编译语言事先声明变量类型，...
【Python入门学习笔记】一、Python基础
EnjoyToShare | 资源分享平台
07-18 903
作者： wugenqiang 学习笔记：https://notebook.js.org/ 微信公众号：码客 E 分享（ID：enjoytoshare） 文档后续更新地址：一、Python基础 第一章 Python 基础 文章目录第一章 Python 基础1.1 环境准备1.1.1 Python 安装1.1.2 安装代码编辑器 PyCharm1.1.3 安装 Jupyter notebook1.2 第一个 Python 程序1.2.1 HelloWorld1.2.2 输入和输出① 输出② 输入1.2..
小甲鱼python教程笔记
08-21
本教程笔记涵盖了 Python 的基础知识点，包括变量、字符串、列表、元组、布尔类型、逻辑运算符、循环结构、列表访问、成员资格运算符、is 运算符、引用和拷贝、列表推导式、元组的使用、字符串的加法和乘法、格式化...
python基础教程（第三版）学习笔记.pdf
06-12
python基础教程（第三版）学习笔记 ''' 第⼀章 基础知识 1.1 安装Python（Windows安装） 下载->安装（最好勾选Add Python X.XX to Path）->启动cmd输⼊python显⽰如下信息： Microsoft Windows [版本 6.1.7601] 版权...
Python基础教程学习笔记 第一章 基础知识
09-03
在"Python基础教程学习笔记"的第一章中，我们重点学习了基础知识，包括语法特性、数据类型、运算符以及内置函数等方面。 首先，Python语言允许在语句末尾不加分号，但在同一行写多条语句时，需要用分号进行分隔。...
Python基础学习笔记
03-21
1.Python基础 1.1使用基础 1.2PIP使用 1.3内置函数/变量/模块 1.4代码输入基础知识细节 1.5列表 1.6元组 1.7字典 1.8集合 1.9公共方法 1.10推导式 1.11函数 1.12文件操作 1.13语法错误与异常处理 1.14生成器 1.15...
Python入门教程完整版（懂中文就能学会）资料、笔记
04-10
Python入门教程完整版（懂中文就能学会）资料、笔记。这个是和Python入门教程完整版（懂中文就能学会）视频配套的资料。
Python基础教程第三版学习笔记
09-18
手动学习笔记，有需要的请下载，如有错误或需要doc版请联系作者
0基础python入门课程笔记（Ⅰ-快捷键、基础语法）
weixin_44416266的博客
06-02 116
python基础入门 1. 快捷操作 cell模式： ctrl+enter 运行 shift+enter 运行并新建一个cell esc 退出cell模式 点击左边 a 新建cell 双击d 删除cell tab 查看可以输入的相关内容 双击可以查看别人编辑好的文件格式 运行文件 % run path/filename 2.基础语法 1） format print('可乐{}元'.format(a,b,c)) 2） 标识符 第一个字符必须是字母或下划线_ 标识符的其他部分由字母、数字或下划线组成
HTTP库之Requests库
Kevin's Blog
05-24 837
文章目录一、介绍二、基本用法2.1 抓取网页源码2.2 GET请求2.2.1 基本GET请求2.2.2 GET添加参数2.2.3 抓取二进制数据 一、介绍   为了方便的实现Cookies、登录验证、代理设置，python的简易HTTP库，比urllib库方便。 二、基本用法 2.1 抓取网页源码 输出Response对象的类型、状态码、响应体类型、cookies和内容 import requests r = requests.get('https://csdn.net') print(type(r)
http://httpbin.org 测试接口解析
chang995196962的博客
06-10 6680
介绍： HTTP库的测试一般来说较为繁琐，一些同学较为熟悉的RequestBin虽然好用，但只能测试POST，且无法控制其response。HTTPBin是以Python+Flask写的一款工具，它cover了各类的HTTP场景，且每个接口一定都有返回。 安装方法 使用pip工具分别安装httpbin与guicorn，guicorn是一个wsgi http服务器，详见guicorn 是什...
httpbin.org的使用
热门推荐
Hubz131的博客
04-09 1万+
一、https://httpbin.org/headers返回headers信息 二、https://httpbin.org/ip返回你使用的访问此链接的IP地址 三、https://httpbin.org/user-agent返回USER-AGENT信息 四、http://httpbin.org/get?show_env=1返回更为详细的信息（被图掉部分为IP） 小知识：...
爬虫学习打卡第二天——requests基础
qq_54715996的博客
11-12 735
一、模块安装 !pip install requests 二、requests模块get函数的使用 百度为例： import requests r=requests.get('https://www.baidu.com/') #get请求网址 print(type(r)) print(r.status_code) print(type(r.text)) print(r.text) #获取百度源码 print(r.cookies) ..
Python-第三方库requests详解
weixin_33671935的博客
12-16 8360
Requests 是用Python语言编写，基于 urllib，采用 Apache2 Licensed 开源协议的 HTTP 库。它比 urllib 更加方便，可以节约我们大量的工作，完全满足 HTTP 测试需求。Requests 的哲学是以 PEP 20 的习语为中心开发的，所以它比 urllib 更加 Pythoner。更重要的一点是它支持 Python3 哦！ Beautiful is...
使用Navicat连接mongodb数据库
清风喜雨的博客
05-28 3685
https://www.yuque.com/qingfengxiyu-alk9t/kb/cfsvyv
python入门学习笔记
最新发布
10-13
好的，关于Python入门学习笔记，我可以给你一些基础知识和学习建议。 首先，Python是一种高级编程语言，它易于学习和使用，因此非常适合初学者。Python有很多应用领域，比如Web开发、数据科学、人工智能等等。 在...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值