分布式数据存储
皓月如我
这个作者很懒,什么都没留下…
展开
-
Greenplum failed segment的恢复方法
转载自:li0924的博客《Greenplum failed segment的恢复方法》【前记】Segment检测及故障切换机制 GP Master首先会检测Primary状态,如果Primary不可连通,那么将会检测Mirror状态,Primary/Mirror状态总共有4种: 1. Primary活着,Mirror活着。GP Master探测Primary成功之后直接返回,进行下一转载 2018-02-02 14:29:50 · 5714 阅读 · 0 评论 -
Citus中的分片策略:Append Distribution追加分配
翻译自《Citus官方文档》Append Distribution追加分配Append distribution is a specialized technique which requires care to use efficiently. Hash distribution is a better choice for most situations. 追加分配是需要谨慎使用...翻译 2018-03-19 14:26:48 · 2685 阅读 · 0 评论 -
Citus架构介绍既实验总结
1. Citus是什么是PostgreSQL的扩展,可以同PG一同安装,之后通过SQL命令加入到数据库中。 【相关操作】#创建Citus扩展:CREATE EXTENSION citus;2. 节点2.1. 协调节点(coordinator node,简称CN)存储所有的元数据,不存储实际数据。为应用系统提供服务,向各工作节点发送查询请求,并汇总结果。对于应用系...原创 2018-03-16 09:33:58 · 3696 阅读 · 0 评论 -
Citus数据分片分布研究(三 节点故障的手动修复)
服务器主机配置: CPU:单核2GHz RAM:2GB DISK:30GB HDDCitus部署配置: Coordinator X 1 (192.168.7.129) Worker X 2 (192.168.7.130,192.168.7.131)1.创建数据库,创建citus插件,部署citus扩展在所有节点上:psql -h 192.168.7.12...原创 2018-03-08 18:59:19 · 2336 阅读 · 1 评论 -
大数据技术下 分布式数据库何去何从?
转自:安华信达的文章 链接地址:http://www.sohu.com/a/133784835_481676一、大数据技术的发展大数据技术从诞生到现在,已历经了十几个年头,市场上也早已有公司或机构对广大金融从业者灌输大数据未来的美好前景与趋势。随着对大数据理念与技术了解的不断深入,人们开始寻找场景落地,以期让大数据在自身的企业中落地并开花结果。从数据的应用角度来看,大数据的应用方...转载 2017-12-13 14:59:50 · 2936 阅读 · 0 评论 -
在CentOS7上编译GreenPlum5.3.0
Step.1 为yum添加国内镜像源下载阿里镜像源$ cd /etc/yum.repos.d$ sudo wget -nc http://mirrors.aliyun.com/repo/Centos-7.repo将阿里镜像源设为默认源$ sudo mv CentOS-Base.repo CentOS-Base.repo.bak$ sudo cp Centos-7.rep...原创 2018-01-18 09:56:54 · 1768 阅读 · 2 评论 -
PostgreSQL9中stream同步与Slony同步的比较
转载自:http://redsky008.iteye.com/blog/1084593 两种都是异步的。如果需要同步,至少等PostgreSQL9.1版本发布后。 尽管如此,正如你看到的异步同步,然后问自己几个问题: 在相同的平台下运行的主从节点使用的是同一个PostgreSQL版本吗? 我的从属节点只需要完成平台故障转移或只读查询吗? 我只需要一个从属节点吗?(多个从属节点可能消...转载 2018-01-18 11:04:22 · 446 阅读 · 0 评论 -
GreenPlum部署时所修改内核参数的含义
ORIGINAL值为CentOS7的缺省值,供对比。# 系统所允许的最大共享内存段的大小(以字节为单位)。# ORIGINAL.kernel.shmmax = 18446744073692774399kernel.shmmax = 500000000 # 整个系统共享内存段的最大数量。# ORIGINAL.kernel.shmmni = 4096kernel.shm...原创 2018-01-18 17:11:21 · 2010 阅读 · 0 评论 -
在CentOS7.2上部署基于PostgreSQL10的citus分布式数据库
转自citusdata官网在线文档《Multi-node setup on Fedora, CentOS, or Red Hat》 在其基础上进行了些微的改动。This section describes the steps needed to set up a multi-node Citus cluster on your own Linux machines from RPM pack...转载 2018-02-28 10:57:07 · 2999 阅读 · 0 评论 -
Citus初步测试
服务器主机配置: CPU:单核2GHz RAM:2GB DISK:30GB HDDCitus部署配置: Coordinator X 1 (192.168.7.129) Worker X 2 (192.168.7.130,192.168.7.131)基于上一篇文章安装部署完Citus后。用psql命令登陆Coordinator节点:psql -h 192.168.7.1...原创 2018-02-28 11:02:46 · 1349 阅读 · 0 评论 -
Citus性能测试
1.【测试环境】1.1.测试组:Citus with PG10 1+21.1.1.协调节点:CPU:单核2GHz RAM:2GB DISK:30GB HDD 主机名:citus IP地址:192.168.7.1291.1.2.工作节点1:CPU:单核2GHz RAM:2GB DISK:30GB HDD 主机名:citus-w1 IP地址:19...原创 2018-02-28 12:24:05 · 3865 阅读 · 1 评论 -
Citus数据分片分布研究(二 副本与故障)
(本文中凡是未显式指出的SQL,均在协调节点上执行)工作节点mydb1=# SELECT * FROM master_get_active_worker_nodes(); node_name | node_port ---------------+----------- 192.168.7.131 | 5432 192.168.7.135 | 543...原创 2018-03-06 18:44:44 · 2180 阅读 · 0 评论 -
Citus数据分片分布研究(一 在工作节点直接操作表)
(本文中凡是未显式指出的SQL,均在协调节点上执行)工作节点mydb1=# SELECT * FROM master_get_active_worker_nodes(); node_name | node_port ---------------+----------- 192.168.7.131 | 5432 192.168.7.135 | 5...原创 2018-03-06 17:11:04 · 2641 阅读 · 0 评论