数据库系列
文章平均质量分 65
xsimah
再见少年拉满弓,不惧岁月不惧风。
1.科技先进工作者、省级评审专家库、参与4篇专利、杭州E类人才;
2.参与管理6+人数据分析与挖掘(AI)团队;
3.多次带领团队荣获数据应用模型创新大赛单位一等奖、作品一等奖、个人一等奖;
展开
-
【PostgreSQL003】PostgreSQL数据表空间膨胀,磁盘爆满,应用宕机(经验总结,已更新)
1.一直以来想写下基于PostgreSQL的系列文章,作为较火的数据ETL工具,也是日常项目开发中常用的一款工具,最近刚好挤时间梳理、总结下这块儿的知识体系。2.熟悉、梳理、总结下PostgreSQL数据库相关知识体系。空间膨胀(主键、外键、索引,增加删除等操作更新频繁)、磁盘爆满(回收机制不生效或不及时)、应用宕机(应用跟PG空间波动较大的数据库安装在同一台服务器)3.欢迎批评指正,欢迎关注,跪谢一键三连!原创 2024-08-17 15:24:12 · 1252 阅读 · 0 评论 -
【数仓系列】maxcompute、postgresql、sparksql等行转列数据处理实战总结(其他类型持续总结更新)
1.熟悉、梳理、总结项目研发实战中的SQL开发日常使用中的问题、经验总结,都是常用的开发技能,可以省去很多时间,时间长就忘记了。原创 2024-05-24 22:25:50 · 422 阅读 · 0 评论 -
【Python001】python批量下载、插入与读取Oracle中图片数据(已更新)
1.熟悉、梳理、总结数据分析实战中的`python、oracle`研发知识体系2.欢迎点赞、关注、批评、指正,互三走起来,小手动起来!原创 2024-05-21 23:42:22 · 948 阅读 · 0 评论 -
【oracle005】又崩溃了!TypeError: a bytes-like object is required, not ‘cx_Oracle.LOB‘
1.熟悉、梳理、总结下oracle相关知识体系。2.日常研发过程中使用较少,随着时间的推移,很快就忘得一干二净,所以梳理总结下,以备日常使用参考。原创 2024-05-23 00:59:03 · 387 阅读 · 0 评论 -
【kettle022】kettle访问OceanBase并处理数据至execl文件(最近完善中)
1.一直以来想写下基于`kettle`的系列文章,作为较火的数据ETL工具,也是日常项目开发中常用的一款工具,最近刚好挤时间梳理、总结下这块儿的知识体系。2.熟悉、梳理、总结下OceanBase(分布式数据库)相关知识体系3.欢迎点赞、关注、批评、指正,跪谢一键三连!原创 2024-05-21 21:26:08 · 214 阅读 · 0 评论 -
【kettle021】kettle访问Neo4j并处理数据至execl文件(最近完善中)
1.一直以来想写下基于`kettle`的系列文章,作为较火的数据ETL工具,也是日常项目开发中常用的一款工具,最近刚好挤时间梳理、总结下这块儿的知识体系。2.熟悉、梳理、总结下`Neo4j`(开源的高性能`NOSQL`图形数据库)相关知识体系3.欢迎关注、点赞、批评、指正,跪谢一键三连!原创 2024-05-20 08:12:20 · 132 阅读 · 0 评论 -
【kettle020】kettle访问milvus并处理数据至execl文件(最近完善中)
1.一直以来想写下基于`kettle`的系列文章,作为较火的数据ETL工具,也是日常项目开发中常用的一款工具,最近刚好挤时间梳理、总结下这块儿的知识体系。2.熟悉、梳理、总结下`milvus`向量数据库相关知识体系3.欢迎关注、点赞、批评、指正,跪谢一键三连!原创 2024-05-20 08:09:41 · 128 阅读 · 0 评论 -
postgresql(libra): 简单实战
写在前面耗时1~2小时实验目的熟悉 FusionInsight LibrA 基础开发知识,因为 FusionInsight LibrA 兼容标准ANSI SQL 99/2003和PostgreSQL生态等特性。实验环境VM虚拟机postgresql镜像: profile搭建命令# 1 拉取镜像docker pull postgres# 2 创建映射目录...原创 2019-07-08 23:23:35 · 645 阅读 · 0 评论 -
【oracle004】oracle内置函数手册总结(已更新)
1.熟悉、梳理、总结下oracle相关知识体系。2.日常研发过程中使用较少,随着时间的推移,很快就忘得一干二净,所以梳理总结下,以备日常使用参考3.欢迎批评指正,跪谢一键三连!原创 2024-05-18 12:36:18 · 747 阅读 · 0 评论 -
【PostgreSQL001】比较开发生产2个数据库结构方法
1.一直以来想写下基于PostgreSQL的系列文章,作为较火的数据ETL工具,也是日常项目开发中常用的一款工具,最近刚好挤时间梳理、总结下这块儿的知识体系。2.熟悉、梳理、总结下PostgreSQL数据库相关知识体系。3.欢迎批评指正,欢迎关注,跪谢一键三连!原创 2024-05-18 12:13:19 · 1208 阅读 · 0 评论 -
【PostgreSQL002】PostgreSQL内置函数手册总结(已更新)
1.熟悉、梳理、总结下PostgreSQL相关知识体系。2.日常研发过程中使用较少,随着时间的推移,很快就忘得一干二净,所以梳理总结下,以备日常使用参考3.欢迎批评指正,跪谢一键三连!原创 2024-05-17 23:29:10 · 221 阅读 · 0 评论 -
【SQL Server001】SQLServer2016常用函数实战总结(已更新)
1.熟悉、梳理、总结下SQL Server相关知识体系2.欢迎批评指正,跪谢一键三连!原创 2024-05-17 23:22:14 · 549 阅读 · 0 评论 -
【oracle003】图片转为字节、base64编码等形式批量插入oracle数据库并查询
1.熟悉、梳理、总结下Oracle相关知识体系2.欢迎批评指正,跪谢一键三连!原创 2024-05-16 01:09:37 · 641 阅读 · 0 评论 -
【oracle002】cx_Oracle.DatabaseError: ORA-24816: Expanded non LONG bind data supplied after
1.熟悉、梳理、总结下Oracle相关知识体系2.欢迎批评指正,跪谢一键三连!原创 2024-05-15 23:53:06 · 848 阅读 · 1 评论 -
【oracle001】cx_Oracle.DatabaseError: ORA-01036: illegal variable name/number,ORA-00911,DPI-1047
1.熟悉、梳理、总结下Oracle相关知识体系2.欢迎批评指正,跪谢一键三连!原创 2024-05-15 22:58:57 · 1979 阅读 · 4 评论 -
【kettle019】kettle访问Impala并处理数据至execl文件(最近完善中)
1.一直以来想写下基于kettle的系列文章,作为较火的数据ETL工具,也是日常项目开发中常用的一款工具,最近刚好挤时间梳理、总结下这块儿的知识体系。2.熟悉、梳理、总结下Impala(Apache Hadoop的开源,本地分析数据库)相关知识体系。3.欢迎批评指正,跪谢一键三连!原创 2024-05-09 20:04:14 · 97 阅读 · 0 评论 -
【kettle018】kettle访问HBase数据库并处理数据至execl文件(最近完善中)
1.一直以来想写下基于kettle的系列文章,作为较火的数据ETL工具,也是日常项目开发中常用的一款工具,最近刚好挤时间梳理、总结下这块儿的知识体系。2.熟悉、梳理、总结下HBase数据库相关知识体系。3.欢迎批评指正,跪谢一键三连!原创 2024-05-09 20:01:23 · 373 阅读 · 0 评论 -
【kettle017】kettle访问DB2数据库并处理数据至execl文件(最近完善中)
1.一直以来想写下基于kettle的系列文章,作为较火的数据ETL工具,也是日常项目开发中常用的一款工具,最近刚好挤时间梳理、总结下这块儿的知识体系。2.熟悉、梳理、总结下DB2数据库(IBM公司开发的一套关系型数据库管理系统)相关知识体系。3.欢迎批评指正,跪谢一键三连!原创 2024-05-09 19:55:21 · 113 阅读 · 0 评论 -
【kettle016】kettle访问Redis并处理数据至execl文件(最近完善中)
1.一直以来想写下基于kettle的系列文章,作为较火的数据ETL工具,也是日常项目开发中常用的一款工具,最近刚好挤时间梳理、总结下这块儿的知识体系。2.熟悉、梳理、总结下Redis非关系数据库相关知识体系。3.欢迎批评指正,跪谢一键三连!原创 2024-05-09 19:51:10 · 264 阅读 · 0 评论 -
【kettle015】kettle访问Hive数据仓库并处理数据至execl文件(最近完善中)
1.一直以来想写下基于kettle的系列文章,作为较火的数据ETL工具,也是日常项目开发中常用的一款工具,最近刚好挤时间梳理、总结下这块儿的知识体系。2.熟悉、梳理、总结下Hive数据仓库相关知识体系。3.欢迎批评指正,跪谢一键三连!原创 2024-05-09 19:47:33 · 327 阅读 · 0 评论 -
【kettle013】kettle访问KUDU并处理数据至execl文件(最近完善中)
1.一直以来想写下基于kettle的系列文章,作为较火的数据ETL工具,也是日常项目开发中常用的一款工具,最近刚好挤时间梳理、总结下这块儿的知识体系。2.熟悉、梳理、总结下PostgreSQL数据库相关知识体系。3.欢迎批评指正,跪谢一键三连!原创 2024-05-09 00:00:23 · 103 阅读 · 0 评论 -
【kettle011】kettle访问PostgreSQL数据库并处理数据至execl文件(已更新)
1.一直以来想写下基于kettle的系列文章,作为较火的数据ETL工具,也是日常项目开发中常用的一款工具,最近刚好挤时间梳理、总结下这块儿的知识体系。2.熟悉、梳理、总结下PostgreSQL数据库相关知识体系。3.欢迎批评指正,跪谢一键三连!原创 2024-05-05 23:34:35 · 373 阅读 · 1 评论 -
【mongo】pymongo.errors.OperationFailure: Authentication failed., full error: {‘ok‘: 0.0, ‘errmsg‘: ‘A
pymongo.errors.OperationFailure: Authentication failed., full error: {‘ok‘: 0.0, ‘errmsg‘: ‘A原创 2024-05-04 22:10:51 · 563 阅读 · 0 评论 -
【kettle008】kettle访问TiDB数据库并处理数据至execl文件(已更新)
1.一直以来想写下基于kettle的系列文章,作为较火的数据ETL工具,也是日常项目开发中常用的一款工具,最近刚好挤时间梳理、总结下这块儿的知识体系。2.熟悉、梳理、总结下TiDB分布式NewSQL数据库相关知识体系。3.欢迎批评指正,跪谢一键三连!原创 2024-04-29 22:44:59 · 566 阅读 · 0 评论 -
【kettle007】kettle访问MongoDB数据库并处理数据至execl文件(已更新)
1.一直以来想写下基于kettle的系列文章,作为较火的数据ETL工具,也是日常项目开发中常用的一款工具,最近刚好挤时间梳理、总结下这块儿的知识体系。2.熟悉、梳理、总结下MongoDB数据库相关知识体系。3.欢迎批评指正,跪谢一键三连!原创 2024-04-29 22:41:41 · 715 阅读 · 0 评论 -
【kettle005】kettle访问Oracle数据库并处理数据至execl文件(已更新)
1.一直以来想写下基于kettle的系列文章,作为较火的数据ETL工具,也是日常项目开发中常用的一款工具,最近刚好挤时间梳理、总结下这块儿的知识体系。2.熟悉、梳理、总结下Oracle数据库相关知识体系3.欢迎批评指正,跪谢一键三连!原创 2024-04-28 23:47:45 · 697 阅读 · 0 评论 -
【kettle006】kettle访问华为openGauss高斯数据库并处理数据至execl文件(已更新)
1.一直以来想写下基于kettle的系列文章,作为较火的数据ETL工具,也是日常项目开发中常用的一款工具,最近刚好挤时间梳理、总结下这块儿的知识体系。2.熟悉、梳理、总结下华为openGauss高斯数据库相关知识体系3.欢迎批评指正,跪谢一键三连!原创 2024-04-28 23:39:42 · 880 阅读 · 0 评论 -
【kettle004】kettle访问本地MySQL数据库并处理数据至execl文件
一直以来想写下基于kettle的系列文章,作为较火的数据ETL工具,也是日常项目开发中常用的一款工具,最近刚好挤时间梳理、总结下这块儿的知识体系。熟悉、梳理、总结下MySQL关系数据库相关知识体系。原创 2024-04-27 23:11:28 · 278 阅读 · 0 评论 -
【kettle003】kettle访问SQL Server数据库并处理数据至execl文件
一直以来想写下基于kettle的系列文章,作为较火的数据ETL工具,也是日常项目开发中常用的一款工具,最近刚好挤时间梳理、总结下这块儿的知识体系。熟悉、梳理、总结下Microsoft SQL Server 2022关系数据库相关知识体系。原创 2024-04-27 23:08:49 · 861 阅读 · 1 评论 -
【kettle002】kettle访问人大金仓KingbaseES数据库并处理数据至execl文件
一直以来想写下基于kettle的系列文章,作为较火的数据ETL工具,也是日常项目开发中常用的一款工具,最近刚好挤时间梳理、总结下这块儿的知识体系。kettle访问人大金仓KingbaseES数据库并处理数据至execl文件。熟悉、梳理、总结下人大金仓KingbaseES数据库相关知识体系。原创 2024-04-23 23:52:35 · 753 阅读 · 3 评论 -
【kettle001】访问国产达梦数据库并处理数据至execl文件
一直以来想写下基于kettle的系列文章,作为较火的数据ETL工具,也是日常项目开发中常用的一款工具,最近刚好挤时间梳理、总结下这块儿的知识体系。熟悉、梳理、总结下达梦(DM)关系型数据库相关知识体系。原创 2024-04-22 23:31:26 · 839 阅读 · 0 评论 -
SQLite导出数据库至sql文件
SQLite是一款实现了自包含、无服务器、零配置、事务性SQL数据库引擎的软件库。SQLite是世界上部署最广泛的SQL数据库引擎。SQLite 是非常小的,是轻量级的,完全配置时小于 400KiB,省略可选功能配置时小于250KiB。SQLite 源代码不受版权限制。。原创 2024-04-21 22:39:21 · 1318 阅读 · 0 评论 -
mysqldump: Got error: 1049: Unknown database ‘root‘ when selecting the datab
mysqldump: Got error: 1049: Unknown database 'root' when selecting the datab。原创 2024-04-08 01:15:05 · 398 阅读 · 0 评论 -
ORA-01846: 周中的日无效以及nls_session_parameters问题小结
在学习单行函数-日期函数NEXT_DAY (”,”) 的过程中,出现了如下图所示的异常。其中,数据库语句 select next_day(sysdate,'tuesday') from dual; 通过查阅资料,是nls_date_language设置的问题。如果通过 alter session set nls_date_language='american'; 数据库语句修改日期语言,则sql语原创 2016-10-10 10:15:42 · 1139 阅读 · 0 评论 -
NVL、NVL2场景分析
NVL、NVL2场景分析 今天在实际在线运行的项目中遇到了界面显示的问题,界面显示拼接的字段时,部分显示多了一些不太雅观的“–”,格式如“XXXX–”。 由于是公司已经开发差不多的系统,不能轻易随便改动,看着写好的数据库语句,还真是不太确定要怎么改? 。。。。。。 具体问题详见如下的截图。 聪明的你发现什么问题了吗?查询出的数据部分后面多了 2 个横线!原创 2016-10-22 14:50:49 · 930 阅读 · 0 评论 -
row_number() 、over()函数小结(Oracle)
不知道各位有没有这种感觉,总是听别人说 Oracle 很强大,但是,一直体会不到。用小沈阳的话说, 这是,为什么呢? 其实,主要是学涯时期,个人对于技术接触的面太窄了。实习期间才了解到 Oracle数据库的强大之处,真是相见恨晚啊,,,博文主角:row_number() / over()row_number() 从1开始,为每一条分组记录返回一个数字over() 开窗函数原创 2016-10-29 15:45:08 · 450 阅读 · 0 评论 -
Oracle如何批量导出数据库表结构(建表语句)
1. 用system用户创建路径 utl_dir用于存放文件-- C:/dba必需是已经存在的目录create or replace directory UTL_DIR as 'C:\dba';--用sys用户登录给要访问的用户指定访问目录的权限 grant write on directory UTL_DIR to public;grant read on directory UTL_DIR原创 2016-11-14 15:45:43 · 30845 阅读 · 3 评论 -
Order By中空字符串的处理方法(Oracle)
缺省处理 Oracle在Order by 时缺省认为null是最大值,所以如果是ASC升序则排在最后,DESC降序则排在最前NVL()函数 nvl函数可以将输入参数为空时转换为特定值,如 nvl(employee_name,’张三’)表示当employee_name为空时则返回’张三’,如果不为空则返回employee_name 通过这个函数可以定制null的排序位置。 Decode()函数转载 2016-11-22 13:15:37 · 2597 阅读 · 0 评论 -
ORA-01810:格式代码出现两次
Oracle中插入date类型数据时,我采用如下转换方式:-- 查询TESTDATE数据表中,指定日期的所有字段SELECT * FROM TESTDATE CI WHERE CI.CREATEDATE = TO_DATE('2016-11-23 18:10:34', 'yyyy-MM-dd HH24:mm:ss');结果报出一下错误信息: 具体分析:由于Oracl转载 2016-11-23 18:37:30 · 479 阅读 · 1 评论 -
PL/SQL Command Window的使用
个人对于工具的理解,只有真正熟悉了之后才会理解其强大。1. 先谈一下诸 Window(PL/SQL Developer) RT: PW(程序窗口): 可以执行 sql,sqlplus 相关的语句,例如存储过程,方法,一般用来开发程序用的。TW(测试窗口): 一般是用来测试存储过程等的debug。SW(SQL窗口): 执行的是dml,ddl语句,主要用户语句的查询、显示、执行原创 2016-11-26 16:06:50 · 26556 阅读 · 0 评论