数据库
文章平均质量分 72
肖永威
信息系统项目管理师,机器学习、数据分析、数据决策、算法模型设计应用研发工程师。
展开
-
在MySQL上实现间隔5分钟汇总取数及相关字符串、时间处理方法实践
在MySQL上实现间隔5分钟汇总取数及相关字符串、时间处理方法实践原创 2023-11-15 19:03:25 · 1646 阅读 · 0 评论 -
MySQL查询时间处理相关函数与方法实践笔记
在查询mysql数据库获取数据时,有这样一个需求:按每30分钟分组获取电量数据,形成1天48个数据点。涉及到时间计算、字符串拼接、分支逻辑判断等。原创 2023-11-11 18:11:40 · 619 阅读 · 0 评论 -
MongoDB增加计算列并修改数据实践笔记
MongoDB增加计算列并修改数据实践笔记,包括增加、删除列、文档关联、增加计算列及条件计算等。原创 2023-03-21 11:37:02 · 1378 阅读 · 0 评论 -
MongoDB数据库迁移及CentOS之间传送文件案例一则
拷贝数据文件实现MongoDB数据库迁移方案,及CentOS之间,使用scp传送文件。原创 2023-02-07 14:31:34 · 687 阅读 · 2 评论 -
在CentOS环境上迁移mongodb小技巧一则
当计算资源紧张时、存储资源不足时,开发者换设备、调整资源是常见的情况,为了便捷迁移数据库,咱们来个乾坤大挪移。原创 2022-05-30 20:53:18 · 616 阅读 · 3 评论 -
MongoDB实战集锦【2022年初】
MongoDB实战集锦原创 2022-05-01 16:20:51 · 2439 阅读 · 1 评论 -
MongoDB增加及修改字段,表关联修改字段方法一则
需求是为集合(表)'customerfeature1'增加'abnormal'字段,根据条件分别设置1或0。原创 2022-04-30 10:02:01 · 5918 阅读 · 0 评论 -
Mongo DB删除重复数据文档实践
Mongo DB删除重复记录实践原创 2022-01-06 18:53:44 · 1308 阅读 · 0 评论 -
MongoDB多表关联分组查询指定行数数据实践遇坑记及解析
MongoDB多表关联分组查询指定行数数据实践遇坑记及解析,基于聚合中的$lookup、$lookup嵌套pipeline、$group与$push、$slice提取子数组、$unwind组合文档等实现,并分析大数据集处理及解决办法。原创 2021-11-30 17:21:38 · 3431 阅读 · 0 评论 -
MongoDB聚合使用表达式运算符(函数)分组按条件计数统计案例一则
MongoDB聚合过程中的表达式运算符(函数)用法入门——分组按条件计数统计案例,在MongoDB聚合统计过程中,经常使用表达式运算符用于构造用于聚合管道阶段的表达式。原创 2021-11-20 11:40:44 · 2036 阅读 · 0 评论 -
Python语言环境中MongoDB聚合经验一则——分组取最近一次记录集
按客户号“carduser_id”分组查询,并按时间“occurtime”排序取最大时间(排序后的第一行记录),也就是取每个客户号下最近一次记录集,而且,此记录集升格为根记录。使用Mongo的{$replacRoot: { newRoot:}}和pymongo的aggregate()。原创 2021-11-13 14:58:37 · 2865 阅读 · 0 评论 -
MongoDB高级查询多级分组聚合及时间计算应用实践案例
本文是Mongo DB复杂聚合查询实践案例,其中使用较多时间变换及时间计算,粗略整理出来分享学习。原创 2021-10-30 10:24:54 · 4364 阅读 · 0 评论 -
ClickHouse数据仓库使用之limit实践
ClickHouse数据仓库使用之limit实践原创 2021-07-21 16:22:19 · 5434 阅读 · 0 评论 -
Python使用ClickHouse实践与踩坑记
本文为初步使用ClickHouse做OLAP数据分析实践,并记录了数据库连接端口配置、接口返回值等问题。体会到ClickHouse的速度快。原创 2021-06-17 11:15:15 · 24096 阅读 · 6 评论 -
Linux环境安装Neo4j图数据库及远程访问防火墙设置
Linux环境安装Neo4j图数据库及远程访问防火墙设置。原创 2021-05-25 14:36:51 · 1332 阅读 · 1 评论 -
MongoDB高级查询聚合应用实践案例
使用mongodb进行分组聚合查询,复杂语句笔记,包括:联合字段分组、最大值、条件、类型转换、计数、求和、表关联等。原创 2021-04-07 09:19:31 · 1149 阅读 · 0 评论 -
生成PowerDesigner16.5设计图大图片的方法
PowerDesigner16.5 的设计成果,一般是通过“Report->Generate Report...”导出报告。 但是文中默认关系图片往往很小,很难辨认使用。下面介绍具体使用方法,生成任意大小的图片。 (1)使用配置报告模版(Report->Report Template...) (2)配原创 2015-04-06 16:24:08 · 5303 阅读 · 0 评论 -
安装PowerDesigner16.5所遇到的问题及解决
在Windows XP虚拟机上(VMware Player 6)安装PowerDesigner16.5完成后,运行"C:\Program Files\Sybase\PowerDesigner 16\PdShell16.exe",只显示空壳界面,几乎没有内容。经多次卸载再安装,问题依旧。 查看系统日志,查到如下图所示SideBySide错误:Resolve Partial As原创 2015-04-06 11:58:14 · 29349 阅读 · 10 评论 -
获取oracle数据库中表中记录行数,不使用select count()方式
逐个表统计数据行数,使用Select count语句统计,比较蛮烦,而且慢,可以使用如下语句直接用户下的所有表的数据行数。 select TABLE_NAME, T.num_rows, T.last_analyzed from tabs T 但是,从tabs表中获取的数据不是非常准确,在tabs表中存在一个字段last_analyzed,有最后分析的日期,一般都不是最新,所以原创 2013-11-11 14:52:15 · 5490 阅读 · 0 评论 -
Python开发中使用Mongo DB入门实践
安装MongoDB,下载地址为win32/mongodb-win32-x86_64-2008plus-ssl-v4.0-latest.zip 1. 命令方式首先创建数据库目录,例如D:\mongodb\data。然后运行命令mongod –dbpath D:\mongodb\data 2. 配置文件方式在任意位置创建一个配置文件,例如D:\mongodb\conf的目录下创建一个名...原创 2018-07-14 16:01:42 · 750 阅读 · 0 评论 -
优化文件下载性能,缓存MongoDB GRIDFS文件(实践讨论稿)
在负载均衡式集群Web服务环境中,以网络文件系统(NFS)为缓存文件共享,使用MongoDB Gridfs提供文件下载服务性能优化分析。原创 2016-10-12 22:49:16 · 3973 阅读 · 0 评论 -
【转】MongoDB的java版本驱动
转自:爱程序网站MongoDB的java版本转载 2015-11-04 10:04:23 · 6139 阅读 · 1 评论 -
Oracle同义词简明用法
介绍Oracle同义词的简明用法及相关语法。原创 2015-05-23 14:23:15 · 1208 阅读 · 0 评论 -
Oracle 11g客户端及PLSQL Developer配置
Oracle 11g客户端资源 下载资源,直接解压进行配置 Oracle官方资源:http://www.oracle.com/technetwork/database/features/instant-client/index-097480.html 由于PLSQL Developer是32位软件,所以,需要下载32位Oracle客户端。 项目打包客户端原创 2015-04-27 16:38:30 · 24748 阅读 · 0 评论 -
搭建高可用mongodb集群(一)——配置mongodb
转自:搭建高可用mongodb集群(一)——配置mongodb Posted on 17 十一月, 2013 by lanceyan在大数据的时代,传统的关系型数据库要能更高的服务必须要解决高并发读写、海量数据高效存储、高可扩展性和高可用性这些难题。不过就是因为这些问题Nosql诞生了。NOSQL有这些优势:大数据量,可以通过廉价服务器存储大量的数据,轻松摆脱传统mys转载 2014-12-28 15:32:24 · 1361 阅读 · 0 评论 -
用MongoDB数据库来管理办公系统中文档型的表单和信息——通用流程化应用审批单设计思路(二,续)
通过对办公系统中文档型表单的业务进行分析,设计使用MongoDB数据库存储文档来快速支撑实现流程类审批单灵活配置、综合信息灵活定制和展现,以及可定制数据上报业务等。内容包括:1、办公系统中文档的定义;2、审批单/表单“保存”与业务完整性;3、数据库设计。原创 2015-01-01 22:36:11 · 4845 阅读 · 0 评论 -
初学MongoDB实践笔记——安装、创建数据库、保存及查询数据
MongoDB数据库中一条记录是一个文档,他的数据结构由(field)和值(value)成对的组成。MongoDB文档类似于JSON对象。字段(域)的值可以包含其他文档、数组和文档数组。原创 2015-01-02 10:51:21 · 2808 阅读 · 0 评论 -
办公系统Oracle数据库监控、统计常用SQL语句
在维护生产环境数据库时,如果需要人工修改数据,禁止使用工具锁表式修改数据(例如:Select * from XXX ... forUpdate),最好使用数据处理脚本,例如在命令行中,一个事务处理完毕(直接提交Commit)。 如下是常用的监控、分析数据的SQL语句。1、统计表空间语句selecta.a1 表空间名称,c.c2 类型,c.c3 区管理,b.b2/1024/原创 2013-11-11 14:52:00 · 1383 阅读 · 0 评论 -
Oracle中查询索引名称,批量修改索引名称语句
在Oralce数据库数据优化过程中,对源数据表处理,原则上是做更名备份,作为被查或回退使用,所以,有修改数据表名后重新建表的操作,这样,往往也需要修改索引、主键、外键名称,方便重建,为了方便、快速生成处理数据脚本,采用批量处理方式,如第4、5段例句,拼接字符串,生成批量处理脚本。一、依据DBA视图查询,涉及到的视图有:user_ind_columns、user_indexes、user_con原创 2013-11-11 14:51:58 · 10531 阅读 · 0 评论 -
办公系统数据库分区及历史数据清理优化方案一
一、概述1、需要分区优化表 OA_OA.DOC_DOCMAIN,按DOC_TYPE分区; OA_OA.DOC_WF_OPINION,按DOCUMENT_ID分区; OA_YWLC.BD_WF_OPTION,按BD_ID分区; OA_YWLC.BD_CONTENT,按BD_ID分区; CORDYS.TASK_LIST,按WORKFLOW_MODULE分区; CO原创 2013-11-11 14:51:56 · 1459 阅读 · 0 评论 -
Python中MongoDB编程与管理实践经验四则(用户管理、索引、查询、导出数据)
Python中MongoDB编程与管理实践经验四则(用户管理、索引、查询、导出数据)原创 2019-06-06 17:08:37 · 675 阅读 · 0 评论 -
如何将mongo查询结果导出到文件中以及导入到另一个Mongo库中
本文发挥Mongo在JavaScript脚本上的优势,编写js代码把查询数据结果导出到文本文件中(JSON格式数据),并使用mongoimport 命令直接导入结果集,同时,也解决了过程中数据的坑。原创 2019-03-09 23:03:22 · 9107 阅读 · 0 评论 -
Linux(CentOS)系统中安装Mongo DB及配置实践
在Linux(CentOS)系统中安装Mongo DB及配置过程实践记录,包括下载包、安装、数据库目录设置、配置文件配置;以及数据库权限与用户管理,远程连接配置等。原创 2019-01-08 19:22:01 · 808 阅读 · 1 评论 -
【转】为什么使用 NoSQL 数据库
本文转自:“译:为什么使用 NoSQL 数据库” FortuneL的自习室 2017年7月向数据时代的转变正在推动 NoSQL随着各行各业朝着数据时代转变,商业世界正在经历巨大的变革。这是由互联网以及其他二十一世纪新技术——云计算、移动应用、社交媒体和大数据驱动的经济模式。每一项数据时代业务的核心都是它的 Web、移动和物联网应用。如今,这是企业用于与转载 2018-01-21 20:38:36 · 826 阅读 · 1 评论 -
MongoDB 与关系型数据库(Oracle)关联统计实践方案(续)
本文基于上篇《MongoDB 与关系型数据库(Oracle)关联统计实践方案 》的设计,采用数据冗余方案,通过增加更新MongoDB中文档状态和时间,来满足查询需求,提高查询开发效率和代码的执行效率。原创 2016-04-04 22:13:43 · 1029 阅读 · 0 评论 -
Oracle查询多个字段行转列处理实践案例
oracle中,多个字段合并式行转列查询实践案例。原创 2016-03-21 14:25:46 · 6387 阅读 · 0 评论 -
使用Java查询MongoDB数据库并封装成查询服务实践
使用MongoDB Client Shell和函数,就像SQL语句中DML一样,快速实施查询,尽量少写后端代码,以类似配置方式来提供查询服务原创 2016-03-19 22:05:34 · 4376 阅读 · 5 评论 -
Oracle11监听服务配置经验小结
我在使用PLSQL Developer工具,访问同事最近部署的开发环境的Oracle数据库时,报出如下错误信息“ORA-12514: TNS:listener does not currently know of service…”。而同事,以及其他同事使用Navicat工具,却能正常访问,而且,Cordys系统平台也能正常访问Oracle数据库。原创 2016-03-17 21:41:53 · 8097 阅读 · 1 评论