![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
python
文章平均质量分 65
白日与明月
厚德 博学 慎思 笃行
展开
-
合并邻近时间的数据
【代码】合并邻近时间的数据。原创 2024-07-09 21:57:56 · 374 阅读 · 1 评论 -
Django中模型的基于类的混入
模型通过基于类的混入(继承),让模型继承重复的字段,减少一些不必要的重复工作.原创 2024-07-06 16:23:21 · 304 阅读 · 0 评论 -
Django-开发一个列表页面
使用django的内置视图,快速创建列表页面,提供基本的查询功能原创 2024-06-26 23:16:24 · 661 阅读 · 0 评论 -
pandas中的loc和iloc
pandas中的loc和iloc使用原创 2024-06-19 21:57:33 · 810 阅读 · 0 评论 -
深入探索Python协程:从基础到实践的学习笔记-01
Python协程(Coroutine)作为一种轻量级的并发模型,越来越受到开发者的关注。本文将带你走进Python协程的世界,从基础概念入手,逐步探索其实现原理、应用场景以及最佳实践。原创 2024-05-12 23:13:21 · 761 阅读 · 1 评论 -
主成分分析(PCA)学习
主成分分析(Principal Component Analysis,PCA)是一种常用的数据降维方法,它通过线性变换将原始数据变换为一组各维度线性无关的表示,通常用于提取数据的主要特征分量。PCA 的目标是从原始数据中提取出最重要的特征,通过这些特征来简化数据的复杂性,同时保持数据集中的大部分信息。原创 2024-05-03 21:06:41 · 1725 阅读 · 0 评论 -
WebSocket学习笔记
websocket学习原创 2024-05-03 10:11:44 · 1114 阅读 · 0 评论 -
使用pyodps的表读写接口实现上传下载
使用pyodps的表读写接口实现上传下载原创 2024-05-01 10:16:31 · 109 阅读 · 0 评论 -
利用PyODPS高效上传下载数据
本文提供了一个使用PyODPS库的Tunnel接口,将数据下载到本地或者上传DataFrame对象到ODPS的实例。原创 2024-05-01 10:02:45 · 151 阅读 · 3 评论 -
使用 Flask、Gunicorn 与 Shell 脚本构建高效 Web 应用部署流程
本文介绍了如何使用 Flask 作为 Web 应用框架,结合 Gunicorn 作为高效的 WSGI 容器来构建并部署 Web 应用。文章还展示了如何编写简单的 shell 脚本来管理应用的启动、重启和停止操作,以提高应用的运维效率。通过使用 Flask 构建 Web 应用逻辑,并结合 Gunicorn 的高性能特性,开发者可以构建出稳定、高效的 Web 服务。同时,shell 脚本的引入使得应用的部署和运维工作变得更加便捷和自动化,为开发者提供了更好的开发体验。原创 2024-04-28 23:30:57 · 1276 阅读 · 1 评论 -
DBSCAN算法学习
DBSCAN算法学习原创 2024-04-28 23:02:09 · 499 阅读 · 0 评论 -
k-均值聚类
k-均值聚类学习和应用原创 2024-04-24 00:07:42 · 818 阅读 · 0 评论 -
基于folium做地图可视化
使用folium和geojson实现离线地图可视化展示原创 2024-04-08 22:48:46 · 322 阅读 · 0 评论 -
duckdb学习-1
使用python操作duckdb,duckdb的数据导入导出,查询元信息原创 2024-03-23 21:55:01 · 1403 阅读 · 0 评论 -
dbt-增量构建
增量构建是指在数据仓库的构建过程中,只处理自上次构建以来发生变化的数据,从而减少数据处理的时间和资源消耗。在 dbt 中,可以使用增量构建来提高数据处理的效率。dbt 中的增量构建是通过比较源表和目标表之间的差异来实现的。dbt 会记录源表和目标表之间的最后一次同步时间,并在下一次构建时只处理自上次同步时间以来发生变化的数据。dbt 的增量构建可以应用在许多场景中,提高数据处理的效率和速度,同时减少资源的消耗。原创 2024-02-27 23:00:49 · 757 阅读 · 0 评论 -
dbt-core中的模型
dbt中的模型原创 2024-02-26 21:49:38 · 390 阅读 · 0 评论 -
开源的数据转换工具dbt-core
dbt的介绍和基本概念原创 2024-02-25 23:30:28 · 1153 阅读 · 0 评论 -
MetaGPT-打卡-day2,MetaGPT框架组件学习
MetaGPT框架学习打卡原创 2024-01-18 20:28:47 · 1210 阅读 · 0 评论 -
Python代码整洁之道:使用异常来代替无意义的返回值
打印错误来代替None模式,可以帮助我们更好的调整bug。python是一个动态语言,因此编写代码时需要小心,None是从函数返回的默认值,但不要在任何意外情况下过度使用它,在使用None之前,请考虑是否可以通过引发异常而使得代码更整洁。原创 2023-03-06 21:49:15 · 221 阅读 · 0 评论 -
python web服务windows管理工具
python web服务windows管理工具,通过图形界面维护python服务。原创 2022-11-15 22:31:42 · 706 阅读 · 0 评论 -
Django表单之ModelForm实践
关于Django的ModelForm使用,以及如何自定义样式,如何处理上传文件。原创 2022-05-26 10:39:11 · 823 阅读 · 2 评论 -
tkinter学习-1
tkinter入门和实践,python GUI程序设计学习。原创 2022-03-13 22:56:06 · 948 阅读 · 0 评论 -
Dask Bag 应用
Dask Bag包提供了如map\filter\groupby和python对象的集合聚集。 类似于pythonnic版本的pyspark RDD。 Dask 包通常用于对非结构化或半结构化数据(如文本数据、日志文件、JSON 记录或用户定义的 Python 对象)的简单计算进行并行化。 Bag的优点: Parallel:数据被拆分,允许多个内核或机器并行执行; 迭代:数据处理延迟,允许大于内存的数据平滑执行,即使在单个分区内的单个机器上; 原创 2021-12-29 22:31:17 · 799 阅读 · 0 评论 -
Dask介绍
Dask 是一个灵活的 Python 并行计算库。Dask由两部分组成: 为计算优化的动态任务调度。这类似于Airflow、Luigi、Celery 或 Make,但针对交互式计算工作负载进行了优化。 “大数据”集合,如并行数组、数据帧和列表,将常用接口(如NumPy、Pandas 或 Python 迭代器)扩展到大于内存或分布式环境。这些并行集合运行在动态任务调度程序之上。 Dask 强调以下优点: 熟悉:提供并行化的 NumPy 数组和 Pandas DataFrame .原创 2021-12-29 20:58:44 · 3310 阅读 · 0 评论 -
设计模式_职责模式
职责模式也称为责任链模式,它将请求的发生在和接受者解耦.客户端不需要知道请求处理者的明确信息和处理的具体逻辑,甚至不需要知道链的结构,它只需要将请求进行发送即可.场景: 员工->请假--> A领导-->B领导-->C负责人在设计职责模式的时候,需要注意的点:请求者和请求内容:确认谁要发送请求,发送请求的对象成为请求者,请求的内容通过发送请求时的参数进行传递. 有哪些责任人:责任人是构成责任链的关键要素.请求的流动方向是链条中的线.而责任人这是链条上的点,线和点...原创 2021-11-28 19:33:10 · 188 阅读 · 0 评论 -
数据预处理
数据预处理摘录数据预处理中常考虑的要点数据标准化数据离散化数据抽样数据降维数据清理常用的数据标准化方法数据标准化是指将数据按照一定的比例进行缩放,使其落入一个特定的小区间.数据标准化可以加快模型的收敛速度,提高模型的精度.1.Min-Max标准化对原始数据进行线性变换,将值映射到[0-1]之间。计算公式如下:x′=x−xminxmax−xminx'=\frac{x-x_{min}}{x_{max}-x_{min}}x′=xmax−xminx−xmin2.Z-.原创 2021-05-17 22:02:36 · 337 阅读 · 0 评论 -
pyodps学习笔记_1
针对PyODPS的一个简单学习笔记梳理. 在日常工作中,用的pyodps并不少, 但很多时候,只是用了一小部分. 很多时候,其实只是对小数据量的清洗.然后快速的导入阿里云上.或者快速的把某个小表下载下来做处理. 其实只是使用了其非常少的一部分功能.所以近期对官方的文档进行了一次回顾,把需要的地方整理了一次.xmind文档:https://shandianpan.com/f/3InU[这里使用了闪电盘做的文件分享,如果失效的话,可以留言,这里提供了一个邀请注册的链接..嗯,作为白嫖资源的报答...原创 2021-03-28 20:26:45 · 314 阅读 · 0 评论 -
SQLAlchemy数据库实战-学习笔记-2
SQLAlchemy数据库实战大概读了一遍,这里上传了整理的思维导图,后续会再写一下SQLAlchemy ORM部分的应用.之前阅读了官方的文档.嗯,英文版的,没有理清楚头绪.不过读了这本书以后,感觉还可以.之前的迷茫,多半是困惑在一些细节地方了. 操作数据库,最关键的,无非就是增删改查了,弄清楚这些基本操作,剩下的就相对快入手了....原创 2021-03-15 21:27:13 · 115 阅读 · 0 评论 -
SQLAlchemy数据库实战-学习笔记-1
今天开始了三月份的第一次学习打卡,2021年,加油!SQLAlchemysqlalchemy是一个python语言实现的的针对关系型数据库的orm库。可用于连接大多数常见的数据库,比如Postges、MySQL、SQLite、Oracle等。嗯…之所以对这个进行学习,是因为在写代码的时候,遇到了数据库的操作问题…然后就发现了SQLAlchemy.希望用它来解决在业务开发中的一些问题.这里以脑图的方式对知识点进行了简单的整理.代码笔记:from datetime import datetim.原创 2021-03-01 22:03:02 · 213 阅读 · 2 评论 -
Jupyter地图可视化方案
文章目录背景IPython.display中的IFrame自定义函数背景因为一些特殊的原因,工作环境是和互联网隔离的.然而在工作中又经常遇到一些需要地图可视化的东西.找了一些资料,但是并不很理想.常见的方案就是Folium包…不过内网比较坑,地图加载也比较麻烦.(在外网也一样).于是萌生了一个想法…借助高德地图API(内网也有高德API),结合IPython的IFrame方法来做一些东西.IPython.display中的IFrame从一些资料上看到,在IFrame中,可以嵌入网页\PDF\图片等等原创 2020-12-29 00:04:36 · 2403 阅读 · 0 评论 -
Python-字符串方法
晚上的时候看到一个书上介绍的一些python字符串方法,所以便摘录了几条.感觉比较有意思.splitline对一段文本进行拆分,返回一个列表.(可以比较一下常用的split方法~)data="""Pandas 的melt的使用_数据分析-CSDN博客Pandas 的melt的使用_数据分析-CSDN博客2Pandas 的melt的使用_数据分析-CSDN博客1"""data.splitlines()['Pandas 的melt的使用_数据分析-CSDN博客', 'Panda.原创 2020-12-28 23:24:27 · 121 阅读 · 1 评论 -
windows环境下的Flask应用部署
因为一个好奇心,所以开始学习Flask,自己做一些简单的工具,用来解决工作上的问题.在过程中,遇到了这样的一个问题.我应该把我的应用部署到哪里?因为我只有一个windows server2008,网上粗略搜索到的,都是基于linux部署的.为了让我的APP能运行的更加省心,我整理了一下windows上部署flask的方案.由于flask本身运行不稳定,需要将其部署在可以容纳WSGI应用的服务器上,客户服务器是windows server 2008,原来发布解决方案是在Linux下Nginx+u..原创 2020-10-21 20:33:51 · 3692 阅读 · 0 评论 -
Jupyter因卸载重装导致的问题修复
Jupyter因重装导致的问题修复原创 2018-03-28 21:09:51 · 5551 阅读 · 3 评论 -
python学习笔记-修改pip下载源-创建虚拟环境
修改下载源目的:提高下载包的速度.参考方法一:#安装管理软件pip install pqi#相关命令:D:\pyspace\flask\syn>pqi useeageUsage: pqi ls //查看正在使用的源 pqi use <name> //切换源 pqi show pqi add <nam...原创 2018-03-26 21:15:11 · 1358 阅读 · 0 评论 -
使用其他分隔符或者终止符打印
问题描述:使用print()输出数据,但是想改变默认的分隔符或者行尾的终止符.解决办法 使用sep和end关键字参数转载 2018-01-08 23:37:15 · 361 阅读 · 0 评论 -
python基础学习(1)
不知不觉的时候,距离毕业越来越近。作为一个二本院校,而且学霸都算不上的普通学生。在面对毕业和就业的时候,难免会有一些的迷茫。前几天的时候,和单位的老前辈聊了聊,然后,有一种豁然开朗的感觉。周末并无大事,变开始了Python的学习。巩固一下基础。原创 2017-04-23 22:50:06 · 341 阅读 · 0 评论