修改GP系统表修复standby master

事件缘由: 客户要求开发greenplum master高可用脚本,要实现master宕机的情况下,standby master被激活,接管业务。 但是在测试的过程中master切来切去,切乱了。 两个节点都是master,都能读写数据库。。。 即便杀掉第一个节点的master的进程,然后...

2018-09-07 21:47:58

阅读数 214

评论数 0

HDFS只支持文件append操作, 而依赖HDFS的HBase如何完成增删改查功能

1. HDFS的文件append功能 早期版本的HDFS不支持任何的文件更新操作,一旦一个文件创建、写完数据、并关闭之后,这个文件就再也不能被改变了。为什么这么设计?是为了与MapReduce完美配合,MapReduce的工作模式是接受一系列输入文件,经过map和reduce处理,直接产生一系列...

2018-07-10 16:10:46

阅读数 85

评论数 1

Hadoop hdfs 参数设置

dfs.replication 指定hdfs上传文件时的副本数,默认是3。 分布式系统上的文件副本数,由上传时的系统副本数决定,不会受后面replication的更改而变化,除非用命令来更改文件的副本数。 因为dfs.replication实质上是client参数,所以可以在上传文件时指定具...

2018-07-06 15:36:40

阅读数 610

评论数 0

zookeeper启动后查看状态报Error contacting service. It is probably not running.错误

在集群上安装并启动zookeeper后,查看zookeeper状态,出现以下情况: [hadoop@oceanbase06 zookeeper-3.4.12]$ zkServer.sh status ZooKeeper JMX enabled by default Using config:...

2018-07-04 13:48:54

阅读数 818

评论数 0

用户home目录权限问题导致的ssh互信登录失败问题

现象 用户配置完ssh互信之后,使用该用户远程/本地登录主机,仍然要输入密码。 原因 当主机互信时所配置的用户名所在主目录的属性为 777时,系统出于安全会强制使已经配置的主机互信失效,强制要求输入密码。 具体可能和LINUX系统的安全配置有关,总之现象就是主机互信访问的用户主目录必须有足...

2018-07-03 16:38:36

阅读数 877

评论数 0

5行代码搞定floyd算法

简介 floyd是图搜算法中很经典的一个算法,用于求一副图中任意两点之间的最短路径(时间,花费等)。其算法思想感觉比Dijkstra简单,而且代码也很容易实现。不过就是效率比较低,三个for循环导致复杂度为O(n3)。 实例 假如有如下的地图,图中四个点代表不同的城市,带箭头的边表示各城...

2018-07-03 10:18:50

阅读数 62

评论数 0

Raft基本理论

本文以问答的方式,总结Raft相关知识。 所有信息来源于Raft论文 第一章 1.为什么要寻找一个新的一致性算法? Unfortunately, Paxos has two significant drawbacks. The first drawback is that Paxo...

2018-06-27 13:43:58

阅读数 692

评论数 1

python知识杂记

1.字符集问题 windows下面尽量用#coding:gbk Linux下面尽量用#coding:utf-8 2.序列是指有序和无序的数据结构 包括:字符串,列表,元组,字典,集合 3.编程规范: 命名规范: 类定义用驼峰式 TestCase 其他用小写字符加下划线 test...

2018-06-27 13:42:14

阅读数 110

评论数 0

MGR单主模式搭建

三个节点 192.168.0.156 oceanbase06 192.168.0.157 oceanbase07 192.168.0.158 oceanbase08 数据库端口:3306 组复制端口:24901 准备工作 关闭防火墙,修改SELinux为disabled ...

2018-06-27 13:41:11

阅读数 2535

评论数 0

Greenplum扩容

一、Greenplum扩展分类 在现有segment主机上添加新的segment。 添加新的segment主机并添加新的segment。 二、总体步骤介绍: 为扩展准备新的节点 具体步骤包括修改操作系统参数,安装数据库软件,交换SSH秘钥。 如非添加新的segment主机,此步...

2018-02-11 15:18:14

阅读数 460

评论数 0

Greenplum数据迁移(恢复到配置不同的GP系统)

操作流程: 1、源库并行备份,生成数据库对象的DDL语句,数据导入文件,及数据库索引、约束等DDL语句。 2、将生成的备份文件copy到目标库master节点。 3、目标库串行恢复,先恢复数据库表结构,然后导入数据,最后生成其他数据库对象。使用gp_dump/gpcrondump并行备份green...

2018-01-02 13:46:14

阅读数 1541

评论数 0

JSON 数据格式

原文地址:http://www.cnblogs.com/SkySoot/archive/2012/04/17/2453010.htmlJSON(JavaScript Object Notation) 是一种轻量级的数据交换格式。JSON采用完全独立于语言的文本格式,这些特性使JSON成为理想的数据...

2017-10-30 17:09:04

阅读数 589

评论数 0

Oracle查询视图需要有基表的查询权限吗?

问题: 1.查询视图,是否必须要有视图基表的查询权限? 2.将视图的查询权限赋予其他用户,只需要有基表的查询权限吗?测试步骤: 1.创建三个用户test1,test2,test3,赋予connect,resource,create view权限。SQL> create user tes...

2017-10-12 14:03:06

阅读数 689

评论数 0

Starting sshd: Missing privilege separation directory: /var/empty/sshd

原文地址:http://blog.163.com/ly_89/blog/static/186902299201110211181828/启动 sshd 服务的时候报了如上的错误,本来开始认为是 sshd 的配置文件的错误,其实不是配置文件的问题。一下是解决的方法:The SSHD service ...

2017-10-12 09:45:47

阅读数 1713

评论数 0

感兴趣的博客地址临时记录

关于求解关键路径相关计算一个简单总结使用multi-paxos实现日志同步应用用小说的形式讲解Spring(1) —— 为什么需要依赖注入一步一图一代码,一定要让你真正彻底明白红黑树Linux makefile 教程 非常详细,且易懂

2017-09-19 17:59:34

阅读数 317

评论数 0

MySQL · 引擎特性 · Group Replication内核解析

原文地址:https://yq.aliyun.com/articles/175055?spm=5176.100239.bloglist.30.V4wyl5 db匠 2017-08-21 09:00:02 发表于: 阿里云数据库ApsaraDB背景为了创建高可用数据库系统,传统的实现方式是创建一...

2017-09-12 13:17:38

阅读数 180

评论数 0

Oracle附加日志supplemental log(未完成,后续补充)

背景最近在测试OGG复制的时候,发现replicat进程莫名其妙abended了。 查看日志发现如下信息:Internal GG error: missing key columns for statement (table LILI.LOGMINER_TABLE, io_type=15) Ab...

2017-08-31 16:52:45

阅读数 1407

评论数 0

Logminer简介及应用

背景近期在研究OGG复制时,对于官方稳定中提到了11.2.0.4及以后的数据库出现了一种新的捕获日志的方法:integrated capture mode。该方法使用Log Mining Server捕获日志。故对于LogMiner进行了一些回顾,整理资料如下。LogMiner用于分析重做日志和归...

2017-08-31 11:08:50

阅读数 2069

评论数 0

Oracle中sysdba和dba的区别

SYSDBA不是权限,当用户以SYSDBA身份登陆数据库时,登陆用户都会变成SYS。 [oracle@ora11g ~]$ sqlplus ogg4o/ogg4o as sysdba SQL> show user USER is “SYS” sysdba身份登陆可以打开,关闭数据库,...

2017-08-30 13:14:24

阅读数 679

评论数 0

OGG对于没有主键表的处理

问:想用ogg对生产库做个报表库。现在生产库中还有一堆表没有主键(其中有些表的记录甚至完全一样),对这些表上的操作容易导致报表库REPLICAT abended,请问这在OGG配置中是如何避免的?HANDLECOLLISIONS?答: In order to maintain data inte...

2017-08-29 15:21:54

阅读数 2335

评论数 0

提示
确定要删除当前文章?
取消 删除