Bleache的博客

原创 Python对象引用，可变性和垃圾回收

py在内存中要一个空间存放列表[1,2,3],然后咔，贴个标签a，然后在贴个标签b在a上指向的列表。由上面例子可以发现如果变量是盒子的话，那么是解释不通py的赋值。想象成便利贴更形象。初学py有的教程为了简单理解什么是变量就简单说是存储数据的盒子，其实这是不准确的。对象在赋值前就创建了，a=[1,2,3]绑定名称之前对象要存在。

原创 Postgresql数据同步到Clickhouse

[experimental] MaterializedPostgreSQL

原创 Mysql数据同步Clickhouse

MaterializedMySQL

原创 pandas生成简单的日历表

pandas apply

原创 常用SQL

常用SQL笔记

转载 pandas重采样月报错

IncompatibleFrequency: Frequency <MonthEnd> cannot be resampled to <3 * MonthEnds>, as they are not sub or super periods# 重采样之前，请尝试从更改PeriodIndex为DateTimeIndex：ts.index = ts.index.astype('datetime64[ns]')print(ts.resample('3M', kind='peri.

原创 pandas处理数据笔记

读取Excel文件path = r"C:\Desktop\demo.xlsx"sn = pd.read_excel(path, sheet_name='demo')print(sn['产品名'].count())删除重复值# 删除重复值， 如果指定subset按照指定的列去重， 不指定就按照整行一起判断是否重复dim_sn = dim_sn.drop_duplicates(subset='套餐名')print(dim_sn.count())正则提取某列中的指定字符fw_one_re =

转载 kettle的job用window的计划任务定时启动

需求： 凌晨0-9点不运行job kettle自带的定时组件无法满足 服务器是windows server先需要创建一个批处理文件， 例如D:cd D:\kettle\data-integration kitchen.bat /file:C:\Users\admin\Desktop\kettle\job\报名单转换job.kjb /level:Base>>D:\kettle\test.log cd 到kitchen.bat的文件目录 ， 然后kitchen.bat /fil

原创 windows定时运行python程序操作设置

原创 Axure笔记

页面介绍添加页面拖动元素创作选择元素右边有相对应的各种设置，背景 边框，字体，样式等页面跳转功能新建一个页面例如设置当我点击山水集团的时候，跳转到第二页右边Interactions 可以添加各种交互功能，这里选择点击弹窗add2页的内容Notes 这里除了吐槽老板其他可以随便填标注 比如提示让程序员小哥加个logo，反正写了也不一定听OKPreview预览一下效果吧怎么把BOX连接起来呢？...

转载 python局域网传送文件

一行代码启动HTTPPS D:\want_send_folder> python -m http.server 0.0.0.0:8000-------------------------------- Over ！！！---------------------------------

转载 SQL限定时间周期

MYSQL 获取当前时间上一个月date_add() 增加date_sub()减少month 月份minute 分钟second 秒

原创 Django文件层次

项目的总的urls.py文件下负责总体的URL控制from django.contrib import adminfrom django.urls import path, includeurlpatterns = [ path('admin/', admin.site.urls), path('forum/', include('forum.urls')), # 如果浏览器中输入的是forum 那么就传到forum文件urls文件处理 path('store/',.

原创 kettle数据定时增量更新

思路获取上次更新的最大ID从数据库查询需要更新的数据插入数据库Kettle第二步SQL的问号是表示引用第一步的最大ID，然后再创建Job设置定时运行的间隔

原创 常用Python代码

系统import tkinter as tkfrom tkinter import filedialogdef file_path(): """ 同过文件对话框的方式选择文件读取路径 return: 返回转义后的路径 """ root = tk.Tk() root.withdraw() file_path = filedialog.askopenfilename() return file_path.replace('\\', '/

转载 sql 和power query一对多情况下 分组后把多列结果合并--array_to_string & group_concat

有这样一个需求把一个人多个项目的放到一列里面显示nameitem张三a张三b李四a王五cpostgresqlSELECT name, array_to_string("array_agg"(item),',') FROM test GROUP BY nameMySQLSELECT name, group_concat(item) FROM test GROUP BY nameSQLsever中需要用到FOR XML PATH...

原创 打开浏览器的方式

一、用selenium打开谷歌或者火狐浏览器from selenium import webdriverdriver = webdriver.Chrome() # 打开谷歌浏览器driver = driver = webdriver.Firefox() # 打开谷歌浏览器driver.get("https://www.baidu.com") # 转到百度用这种方式来打开浏览器需要安装相对应的驱动1 Google Chrome需要下载 [chromedriver](https:/

转载 误删pip 安装pip

安装pipModuleNotFoundError: No module named 'pip'(tan_flask_env) PS D:\python100\tan_flask\tan_flask_env> curl https://bootstrap.pypa.io/get-pip.py -o get-pip.py(tan_flask_env) PS D:\python100\tan_flask\tan_flask_env> python get-pip.pyCollecting pi

原创 激活虚拟环境时候报错 Execution_Policies

创建虚拟环境python -m venv tan_flask_env`在这里插入代码片`激活虚拟环境时候报错`请参阅 https:/go.microsoft.com/fwlink/?LinkID=135170 中的` about_Execution_Policies。输入以下命令修改执行策略Set-ExecutionPolicy -ExecutionPolicy RemoteSigned -Scope CurrentUser尝试激活PS D:\python100\tan_flask\ta