➤ 数据库
文章平均质量分 57
lytao123
一起学习一起嗨!
展开
-
原来还可以使用 DataX 进行数据同步
DataX 进行数据同步DataX一、环境要求二、DataX部署三、新建 JobDataX DataX 是阿里云 DataWorks 的开源版本,在阿里巴巴集团内被广泛使用的离线数据同步工具/平台。DataX 实现了包括 MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、Hologres、DRDS 等各种异构数据源之间高效的数据同步功能。地址:https://github.原创 2021-09-26 16:54:24 · 1027 阅读 · 0 评论 -
关于使用阿里 drds ddl 语句卡死问题解决方案
在使用阿里 drds 过程中因为问题现象比较诡异,故做如下记录发现。多条 DDL 无法执行成功,导致表锁死或卡死状态。数据库现象无响应。进行表操作(写或修改表结构)时发现在正常时间内本应返回操作结果的但无响应;连接不上数据库。服务包大量 unkownhost 异常,查看数据库连接信息大多 sleep 或者 pending;一些莫名的异常现象,例如删除表时,ddl 卡死,但表在可视化工具中已无法查看,然后创建表是提示表已存在等现象;相关知识# 查看全部正在执行的 ddl jobshow fu原创 2021-06-12 23:09:10 · 850 阅读 · 1 评论 -
借助DBExportDoc导出数据库表结构Word
前言辛辛苦苦干了一年又一年项目就快要验收了,研发同学就可能会为验收文件中的数据库设计文件头疼了,需要一个字段一个字段的进行粘贴整理,实在太费时,太麻烦。这里就汇总一下我们常用的Oracle、MySql 数据库是如何将表结构快速导出成 Word 形式的文档来,借助大神写的 DBExportDoc 工具可以简单、高效、美观的导出表结构文档。如下为导出样例图:是不是非常美观?接下来来说说如何使用这个工具一、准备DBExportDoc 工具下载MySql 选择下载 DBExportDoc V1.0 F原创 2020-12-06 11:50:06 · 865 阅读 · 0 评论 -
Oracle分页查询出现重复数据、遗漏数据问题复现、解决
一、背景Oracle 数据库版本信息:序号BANNER1Oracle Database 11g Enterprise Edition Release 11.2.0.4.0 - 64bit Production2PL/SQL Release 11.2.0.4.0 - Production3CORE 11.2.0.4.0 Production4TN...原创 2020-05-08 13:15:08 · 2170 阅读 · 0 评论 -
Oracle 闪回特性 详解
Oracle的闪回技术提供了一组功能,可以访问过去某一时间的数据并从人为错误中恢复。闪回技术是Oracle 数据库独有的,支持任何级别的恢复,包括行、事务、表和数据库范围。使用闪回特性,您可以查询以前的数据版本,还可以执行更改分析和自助式修复,以便在保持数据库联机的同时从逻辑损坏中恢复。闪回技术包括以下特性: (1) 闪回查询允许用户查询过去某个时间点的数据,以重新...转载 2019-02-10 18:11:37 · 676 阅读 · 0 评论 -
MongoDB3.6在window10下的搭建使用(一看就明白搭建)
一、下载MongoDB首先你可以在MongoDB的官网下载windows版MongoDB,MongoDB是免费的。下面是下载步骤:下载完成后进行安装,一般是安装在D盘,我是安装在D:\MongoDB下,因为博主准备系统的学习MongoDB,在MongoDB中有复制集的功能,所以用的是虚拟机,喜欢MongoDB或正在学习MongoDB的小伙伴可以和我一起探讨。二、安装MongoDB...原创 2018-07-16 22:29:12 · 2725 阅读 · 0 评论 -
MongoDB复制集原理、搭建及复制集简单维护
一、MongoDB复制集原理(一)复制集简介(二)复制集节点介绍二、MongoDB复制集搭建(一)MongoDB配置文件配置(二)MongoDB复制集配置文件配置(三)MongoDB复制集初始化启动三、MongoDB复制集配置文件参数介绍四、关于MongoDB复制集待思考问题,欢迎留言评论引用: MongoDB复制集原理:http://www.mongo...原创 2018-07-22 13:50:50 · 10442 阅读 · 1 评论 -
MongoDB的基本操作(插入、删除、更新、索引)
一、MongoDB与Sql数据库概念上的区别 MongoDB与SQL数据库有几个概念上的问题是不一样的,主要有sql数据库中的表(table)在MongoDB中叫集合(collection);sql数据库表中一行记录(row)在MongoDB中叫文档(document);MongoDB中的主键(_id)能自动创建,只有弄清楚这两个大的区别,那就可以开始MongoDB的操作了。二、Mong...原创 2018-08-08 14:15:14 · 4434 阅读 · 0 评论 -
Java实现MongoDB的操作,以Java爬虫爬取CSDN博客为例
一、下载驱动 大家可以去MongoDB官网下载,我也整理了MongoDB的Java驱动包上传到了CSDN,点击下载二、代码简介 本爬虫是基于HttpClient+Jsonp框架编写,数据库采用MongoDB。功能是通过提供CSDN中博主的id名,将该博主的博文信息采集入库。大体过程是通过HttpClient访问网页,Jsonp解析将爬取的博文地址(URL)进行存储在集合 blo...原创 2018-08-08 14:59:04 · 932 阅读 · 0 评论 -
【日积月累】MongoDB 注册为 Window 服务时遇到的问题总结
一、Error creating service: 名称已用作服务名或服务显示名。 (1078) 启动 MongoDB 服务总是很麻烦的,因此一般通过注册为系统服务,随系统启动。一般是通过配置文件启动,配置文件内容:#ip绑定,限制ip访问bind_ip=192.168.88.88#端口port=20001#数据库配置路径dbpath=C:\MongoDB\data#日志文...原创 2018-10-26 21:24:53 · 1463 阅读 · 1 评论