自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(42)
  • 收藏
  • 关注

原创 信息组织与提取之三种信息标记

采用的是。

2024-01-09 14:41:18 406

原创 基于bs4库的HTML格式化和编码

html文本的标签以及内容增加换行符。将任何读入的html文件或字符串都。,因此在使用bs库时没有任何障碍;转换成了UTF8编码。

2023-12-26 15:22:06 392

原创 基于bs4库的HTML内容遍历方法

任何一个html和xml格式的文件都是树形结构,如下:BeautifulSoup库是对标签树的功能的遍历集合,所以我们可以将所有的遍历功能分为上行遍历、下行遍历和平行遍历。

2023-12-26 14:55:51 346

原创 BeautifulSoup库的基本元素

BeautifulSoup库都能对它做很好的解析。BeautifulSoup库是。

2023-12-22 14:55:11 343

原创 BeautifulSoup库的安装

也称“美味汤”,是非常优秀的python第三方库,能够对html xml格式进行解析并提取其中的相关信息。演示HTML页面地址:https://python123.io/ws/demo.html。

2023-12-22 13:45:16 335

原创 requests实现爬虫

网络图片的爬取与存储。

2023-12-21 15:04:12 462

原创 requests实现爬虫

【代码】requests实现爬虫。

2023-12-21 14:23:54 419

原创 requests实现爬虫

【代码】【无标题】

2023-12-21 13:35:39 927

原创 1.2计算机的基本组成

计算机的基本组成

2023-07-11 18:13:42 59

原创 1.1计算机系统简介

计算机系统简介

2023-06-24 17:06:56 41

原创 Django——支付宝(沙箱)

django中支付宝(沙箱)简单使用python=3.6.8django=2.1.8python-alipay-sdk=2.0.1非官方支付宝 Python SDK: https://github.com/fzlee/alipay/blob/master/README.zh-hans.md#alipay.trade.page.pay沙箱环境配置1、在支付宝开放平台---->开发者中心—>开发服务---->沙箱2、RSA2密钥生成并上传参考官方地址:https://o

2021-01-18 10:18:13 1179 1

原创 django——ORM聚合查询及关联查询

示例模型类from django.db import models#定义图书模型类BookInfoclass BookInfo(models.Model): btitle = models.CharField(max_length=20, verbose_name='名称') bpub_date = models.DateField(verbose_name='发布日期') bread = models.IntegerField(default=0, verbose_name

2021-01-18 10:17:23 1009

原创 Django——ORM查询集介绍

查询集 QuerySet1 概念Django的ORM中存在查询集的概念。查询集,也称查询结果集、QuerySet,表示从数据库中获取的对象集合。当调用如下过滤器方法时,Django会返回查询集(而不是简单的列表):all():返回所有数据。filter():返回满足条件的数据。exclude():返回满足条件之外的数据。order_by():对结果进行排序。对查询集可以再次调用过滤器进行过滤,如BookInfo.objects.filter(bread__gt=30).order_b

2021-01-18 10:16:51 978

原创 Django——管理器Manager

管理器Managermodel模型可参考管理器是Django的模型进行数据库操作的接口,Django应用的每个模型类都拥有至少一个管理器。我们在通过模型类的objects属性提供的方法操作数据库时,即是在使用一个管理器对象objects。当没有为模型类定义管理器时,Django会为每一个模型类生成一个名为objects的管理器,它是models.Manager类的对象。自定义管理器我们可以自定义管理器,并应用到我们的模型类上。注意:一旦为模型类指明自定义的过滤器后,Django不再生成默认管理对

2021-01-18 10:16:10 885

原创 Celery介绍——手机短信异步发送

1.Celery介绍1.1 celery应⽤举例Celery 是⼀个 基于python开发的 分布式异步消息任务队列 ,通过它可以轻松的实现任务的异步处理,如果你的业务场景中需要⽤到异步任务,就可以考虑使⽤celery你想对100台机器执⾏⼀条批量命令,可能会花很⻓时间 ,但你不想让你的程序等着结果返回,⽽ 是给你返回⼀个任务ID,你过⼀段时间只需要拿着这个任务id就可以拿到任务执⾏结果, 在任务执 ⾏ing进⾏时,你可以继续做其它的事情Celery 在执⾏任务时需要通过⼀个消息中间件来接收和

2021-01-16 13:45:13 1168 1

原创 mysql主从同步 (利用docker实现一主一从)

MySQL主从同步1. 主从同步机制1.1 主从同步介绍和优点在多台数据服务器中,分为主服务器和从服务器。一台主服务器对应多台从服务器。主服务器只负责写入数据,从服务器只负责同步主服务器的数据,并让外部程序读取数据。主服务器写入数据后,即刻将写入数据的命令发送给从服务器,从而使得主从数据同步。应用程序可以随机读取某一台从服务器的数据,这样就可以分摊读取数据的压力。当从服务器不能工作时,整个系统将不受影响;当主服务器不能工作时,可以方便地从从服务器选举一台来当主服务器使

2021-01-16 13:44:25 1116

原创 Django实现MySQL读写分离

1. 增加slave数据库的配置DATABASES = { 'default': { # 写(主机) 'ENGINE': 'django.db.backends.mysql', # 数据库引擎 'HOST': '192.168.103.158', # 数据库主机 'PORT': 3306, # 数据库端口 'USER': 'itcast', # 数据库用户名 'PASSWORD': '123456', # 数据库用户密

2021-01-16 13:44:01 1104

转载 JWT的应用及配置

JWT在用户注册或登录后,我们想记录用户的登录状态,或者为用户创建身份认证的凭证。我们不再使用Session认证机制,而使用Json Web Token认证机制。什么是JWTJson web token (JWT), 是为了在网络应用环境间传递声明而执行的一种基于JSON的开放标准((RFC 7519).该token被设计为紧凑且安全的,特别适用于分布式站点的单点登录(SSO)场景。JWT的声明一般被用来在身份提供者和服务提供者间传递被认证的用户身份信息,以便于从资源服务器获取资源,也可以增加一些额外

2021-01-16 13:43:30 1186

原创 JWT原理

1.COOKIE使用和优缺点https://www.cnblogs.com/xiaonq/p/11094480.html1.1 cookie原理:用户名+密码cookie是保存在用户浏览器端,用户名和密码等明文信息1.2 session使用原理session是存储在服务器端的一段字符串,相当于字典的key1.用户向服务器发送用户名和密码。2.验证服务器后,相关数据(如用户角色,登录时间等)将保存在当前会话中。3.服务器向用户返回session_id,session信息都会写

2021-01-16 13:42:51 1089

原创 Django——虚拟环境

虚拟环境为什么需要虚拟环境:到目前位置,我们所有的第三方包安装都是直接通过pip install xx的方式进行安装的,这样安装会将那个包安装到你的系统级的Python环境中。但是这样有一个问题,就是如果你现在用Django 1.18.x写了个网站,然后你的领导跟你说,之前有一个旧项目是用Django 2.1.x开发的,让你来维护,但是Django 1.18.x不再兼容Django 2.1.x的一些语法了。这时候就会碰到一个问题,我如何在我的电脑中同时拥有Django 1.18.x和Django 2.1

2021-01-15 16:28:19 1259

原创 django自带模板使用及语法

1 配置在工程中创建模板目录templates。在settings.py配置文件中修改TEMPLATES配置项的DIRS值:TEMPLATES = [ { 'BACKEND': 'django.template.backends.django.DjangoTemplates', 'DIRS': [os.path.join(BASE_DIR, 'templates')], # 此处修改 'APP_DIRS': True, 'OPT

2021-01-15 16:27:47 1248

原创 redis集群搭建

1. 集群的概念集群是一组相互独立的、通过高速网络互联的计算机,它们构成了一个组,并以单一系统的模式加以管理。一个客户与集群相互作用时,集群像是一个独立的服务器。集群配置是用于提高可用性和可缩放性。当请求到来首先由负载均衡服务器处理,把请求转发到另外的一台服务器上。2. redis集群分类软件层面硬件层面软件层面:只有一台电脑,在这一台电脑上启动了多个redis服务。硬件层面:存在多台实体的电脑,每台电脑上都启动了一个redis或者多个redis服务。3. 搭

2021-01-15 16:27:03 1011

原创 redis主从搭建

主从概念⼀个master可以拥有多个slave,⼀个slave⼜可以拥有多个slave,如此下去,形成了强⼤的多级服务器集群架构master用来写数据,slave用来读数据,经统计:网站的读写比率是10:1通过主从配置可以实现读写分离master和slave都是一个redis实例(redis服务)主从配置配置主查看当前主机的ip地址ifconfig修改/etc/redis/redis.conf文件sudo vi redis.confbind 192.168.26.12

2021-01-15 16:26:36 38

原创 redis使用——python

一、介绍redis 是一个NoSQL, 以 key、value形式存在、是基于内存,读写速度快,可持久化二、数据类型string --- 字符串list --- 列表hash --- 哈希 =》排行set --- 集合sortedset --- 有序集合 =》商品列表bitmap --- 位图1、字符串 stringset(name, value) 创建数据redis_conn.set('username', 'zhangsan')get(name) 获取数据

2021-01-15 16:25:45 1155

原创 Django-celery-redis异步发邮件

Django-Celery-Redis异步发邮件python == 3.7.6django == 2.1.8celery == 4.4.7redis == 3.5.3eventlet == 0.26.1什么是celeryCelery是一个功能完备即插即用的任务队列。它使得我们不需要考虑复杂的问题,使用非常简单。celery适用异步处理问题,当发送邮件、或者文件上传, 图像处理等等一些比较耗时的操作,我们可将其异步执行,这样用户不需要等待很久,提高用户体验。 celery的特点是:简单,

2021-01-14 08:59:06 1726

原创 django中间件

中间件Django中的中间件是一个轻量级、底层的插件系统,可以介入Django的请求和响应处理过程,修改Django的输入或输出。中间件的设计为开发者提供了一种无侵入式的开发方式,增强了Django框架的健壮性。我们可以使用中间件,在Django处理视图的不同阶段对输入或输出进行干预。1 中间件的定义方法定义一个中间件工厂函数,然后返回一个可以被调用的中间件。中间件工厂函数需要接收一个可以调用的get_response对象。返回的中间件也是一个可以被调用的对象,并且像视图一样需要接收一个requ

2021-01-14 08:57:50 1659

原创 七牛云上传图片的简单实现——python

参考官方接口文档https://developer.qiniu.com/kodo/sdk/1242/python1、安装pip install qiniu2、准备工作注册账号登陆,个人中心获取Access Key 和 Secret Key创建对象存储空间进入空间获取测试域名3、使用python进行上传from qiniu import Auth, put_file# 获取Access Key 和 Secret Key 后,进行初始化对接:q = Auth(access_k.

2021-01-14 08:56:46 2301

原创 Django + Uwsgi + Nginx 的生产环境部署

1.django的settings配置nginx负载均衡:https://www.cnblogs.com/xiaonq/p/10468998.htmlhttps://www.cnblogs.com/xiaonq/p/8932266.html# 1.修改配置# 正式上线关闭调试模式, 不会暴露服务器信息DEBUG = True# 2.允许的主机ALLOWED_HOSTS = ['xxx.com','127.0.0.1']# 3.前端修改接口地址(vue)http://192.168.56

2021-01-14 08:55:30 1658

原创 uwsgi+nginx部署问题解决

1.常见排查方法1.nginx错误启动抱错systemctl restart nginxtail -f /var/log/nginx/error.log在浏览器中访问抱错tail -f /var/log/nginx/access.logcd /home/worker/opwf_project/uwsgi_conftail -f *2.配置文件2.端口占用冲突问题端口占用(syl) root@dev:uwsgi_conf# netstat -anptu | grep

2021-01-14 08:54:23 1742

原创 Cookie 和 Session

一、CookieCookie,有时也用其复数形式Cookies,指某些网站为了辨别用户身份、进行session跟踪而储存在用户本地终端上的数据(通常经过加密)。Cookie最早是网景公司的前雇员Lou Montulli在1993年3月的发明。Cookie是由服务器端生成,发送给User-Agent(一般是浏览器),浏览器会将Cookie的key/value保存到某个目录下的文本文件内,下次请求同一网站时就发送该Cookie给服务器(前提是浏览器设置为启用cookie)。Cookie名称和值可以由服

2021-01-13 11:17:52 1727

原创 Django——三种路径

1.django中的三种路径1.1 操作系统文件绝对路径django 静态文件查找, 模板查找(第一种)# 去配置好的 文件夹 中查找指定的文件BASE_DIR = os.path.dirname(os.path.dirname(os.path.abspath(__file__)))STATIC_URL = '/static/'# /teach/shiyanlou_project/syl/apps/user/ # linux# E:\_000\XSX1.2 django 导包路径

2021-01-13 11:15:41 2211

原创 阿里云短信服务的使用-----获取短信验证码

封装发短信代码utils/MyBaseView.pyfrom aliyunsdkcore.client import AcsClientfrom aliyunsdkcore.request import CommonRequestfrom code2001B.settings importALY_ACCESSKEY_ID,ALY_ACCESSKEY_SECRET,QINIU_ID,QINIU_SECRET,SHAZFB_APPID,SHA_RETURN_URL,SHA_URLdef sen...

2021-01-13 11:13:28 2078

原创 七牛云上传文件----前端vue实现

官方接口文档:python SDK:https://developer.qiniu.com/kodo/sdk/1242/pythonJavaScript SDK: https://developer.qiniu.com/kodo/sdk/1239/java1、安装pip install qiniunpm install qiniu-js2、准备工作申请空间及获取密钥准备3、后端获取七牛云token#######################utils/MyBaseView.py.

2021-01-13 11:10:56 2282

原创 初始化项目结构——vue前端

1.初始化项目结构└─opwf_project # 项目根路径 │ .gitignore # 提交git仓库时,不提交的文件必须要在这里进行标注 │ README.en.md # 英文(项目介绍) │ README.md # 中文项目简介 │ requirements.txt # django项目安装文件 │ ├─celery_task

2021-01-13 11:03:45 2311

原创 三方登录---新浪微博登陆

OAuth2.0授权认证oauth2.0是什么?OAuth(开放授权)是⼀个开放标准,允许⽤户让第三⽅应⽤访问该⽤户在某⼀⽹站上存储的私密的资源(如照⽚,视频,联系⼈列表),⽽⽆需将⽤户名和密码提供给第三⽅应⽤。Oauth2.0的四种授权模式?https://www.cnblogs.com/Innocent-of-Dabber/p/11009811.html隐式授权模式(Implicit Grant)授权码授权模式(Authorization code Grant)密码模式(Resour

2021-01-13 11:02:02 2305

原创 图片验证码及使用django-redis缓存

一、django缓存设置1、安装django缓存模块pip install django-redis==4.12.12、settings.py中配置缓存# 缓存配置CACHES = { # django存缓默认位置,redis 0号库 # default: 连接名称 "default": { "BACKEND": "django_redis.cache.RedisCache", "LOCATION": "redis://127.0.0.1:6379/0", "OPTION

2021-01-13 10:55:17 2148 1

原创 请求与响应

一、请求request1. URL路径参数在定义路由URL时,可以使用正则表达式提取参数的方法从URL中获取请求参数,Django会将提取的参数直接传递到视图的传入参数中。未命名参数按定义顺序传递, 如url(r'^weather/([a-z]+)/(\d{4})/$', views.weather),def weather(request, city, year): print('city=%s' % city) print('year=%s' % year) re

2021-01-13 10:53:25 2125

原创 权限管理 --- RBAC简单实现

1、RBAC模型RBAC模型(Role-Based Access Control:基于角色的访问控制)就是用户通过角色与权限进行关联简单的说,一个用户拥有若干角色,每个角色拥有若干权限这样,就构成了**“用户-角色-权限”**的授权模型在这种模型中,用户与角色之间,角色与权限之间,一般都是多对多关系2、表设计from django.db import modelsfrom django.contrib.auth.models import AbstractUserfrom utils

2021-01-12 10:22:35 2535

原创 用户模块--登录及权限认证

使用 DRF 框架 再带的登陆认证进行登陆userapp.urls.pyfrom django.urls import pathfrom userapp import views as userviewsfrom rest_framework_jwt.views import obtain_jwt_token # drf自带的登陆认证,会自动生成jwt-tokenurlpatterns = [ path('login/', obtain_jwt_token), # 登录]

2021-01-12 10:20:29 3003

原创 项目架构

1、项目架构前后端时候分离是后端使用的框架Django-restframwork + celery前端使用的框架vue数据库选择mysql+redis缓存实现Redis服务部署基于Ubuntu的单机部署/ 基于docker-componse的一键部署代码管理Git2、数据库设计3、集成测试测试阶段留意测试反馈平台的bug报告...

2021-01-12 10:18:15 2571

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除