大数据架构
文章平均质量分 57
MasterCoding
热爱软件
展开
-
Redis4.0.1的安装及哨兵模式的配置
[Redis4.0.1][6]的安装及哨兵模式的配置声明:此文适合4.0.1的安装,也许很多年后,你们看到这篇文章,已经出到n.n版本了,那么这个教程可能就不适合你了。我的linux版本是Centos 7.0,所以有关命令都是Centos中的命令。(建议把防火墙都关闭) 首先我们可以去官方下载tar.gz官方网站:[https://redis.io/download][1]或者直接 $ wge原创 2017-07-29 10:32:37 · 6721 阅读 · 0 评论 -
独立模式、伪分布模式、hbase和hadoop HA(高可用)完全分布式模式。集成配置
一、独立模式:1.下载hbase文件略2.tar开略3.配置环境变量略4.修改配置文件在hbase安装目录下://配置jdk路径[/conf/hbase-env.sh]export JAVA_HOME=/zdq/jdk//配置hbase文件路径[conf/hbase-site.xml]<property> <name>hbase.rootdir</name>原创 2017-11-01 20:33:38 · 1584 阅读 · 0 评论 -
ZooKeeper+Hadoop的ResourceManager HA集群高可用配置
1.修改Linux主机名 2.修改IP 3.修改主机名和IP的映射关系注意######如果你们公司是租用的服务器或是使用的云主机(如华为用主机、阿里云主机等)/etc/hosts里面要配置的是内网IP地址和主机名的映射关系 4.关闭防火墙 5.ssh免登陆 6.安装JDK,配置环境变量等集群规划: 主机名 IP 安装的软件 运行的进程 service1 192.168原创 2017-10-29 02:57:32 · 2599 阅读 · 0 评论 -
Hadoop本地模式、伪分布式、完全分布式安装
准备工作:Centos 7系统、4台虚拟机(相互免密登陆)、jdk1.8、关闭防火墙、设置静态IP 1、安装hadoop a)下载hadoop-2.7.4.tar.gz b)tar开 $>cd /zdq/soft $>tar -xzvf hadoop-2.7.4.tar.gz -C /zdq2、配置hadoop环境变量vim /et原创 2017-10-02 10:59:56 · 792 阅读 · 0 评论 -
Redis的基本命令
近期学习Redis,特地将Redis的一些操作命序整理出来(当前版本4.0.1,多年之后也许这些命令有更新哟,请注意。)操作相关的命令连接quit:关闭连接(connection) auth:简单密码认证持久化save:将数据同步保存到磁盘 bgsave:将数据异步保存到磁盘 lastsave:返回上次成功将数据保存到磁盘的Unix时戳 shundown:将数据同步保存到磁盘,然后关闭服务远原创 2017-07-29 10:43:11 · 313 阅读 · 0 评论 -
Redis集群搭建与简单使用
Redis集群搭建与简单使用介绍安装环境与版本 我用了三台虚拟机模拟6个节点,一台机器2个节点,创建出3个master、3个salve 环境。 redis 采用 redis-4.0.1 版本。 上台台虚拟机都是 CentOS ,一台 CentOS7 (IP:192.168.3.231),一台 CentOS7(IP:192.168.3.232) ,一台 CentOS7(IP:192.168.3.原创 2017-07-31 01:02:55 · 484 阅读 · 0 评论 -
Disruptor并发框架入门
1、Martin Fowler在自己网站上写了一篇LMAX架构的文章,在文章中他介绍了LMAX是一种新型零售金融交易平台,它能够以很低的延迟产生大量交易。这个系统是建立在JVM平台上,其核心是一个业务逻辑处理器,它能够在一个线程里每秒处理6百万订单。业务逻辑处理器完全是运行在内存中,使用事件源驱动方式。业务逻辑处理器的核心是Disruptor。 2、Disruptor它是一个开源的并发框架,并获得原创 2017-08-04 00:42:56 · 586 阅读 · 0 评论 -
RocketMQ简介以及双Master模式的配置
1、RocketMQ介绍 (最开始RocketMQ是阿里研究出来的,在2016-11-28捐赠给了开源软件基金会Apache。)1.1. 简介 RocketMQ 是一款分布式、队列模型的消息中间件,具有以下特点:能够保证严格的消息顺序 提供丰富的消息拉取模式 高效的订阅者水平扩展能力 实时的消息订阅机制 亿级消息堆积能力 选用理由: 强调集群无单点,可扩展,任意一点高可用,水平可扩原创 2017-08-14 09:52:39 · 3185 阅读 · 1 评论 -
Redis新集群操作(在已有的集群上添加新节点)
我就在我已有的一台centos7.0,添加新的集群节点 1、创建7003/7004文件夹。2、拷贝配置文件、拷贝redis.conf文件到对于的7003,7004目录下3、修改配置文件7003、7004同样方式。 vim redis.conf修改内容如下: port:7003 pidfile /var/run/redis_7003.pid cluster-config-file nodes原创 2017-08-01 02:20:40 · 1179 阅读 · 0 评论 -
java操作redis集群(基本操作)
package com.company;import redis.clients.jedis.HostAndPort;import redis.clients.jedis.Jedis;import redis.clients.jedis.JedisCluster;import redis.clients.jedis.JedisPoolConfig;import java.io.FileNotF原创 2017-07-31 01:30:49 · 1419 阅读 · 0 评论 -
java操作Redis(哨兵或单机模式)
package com.company;import redis.clients.jedis.HostAndPort;import redis.clients.jedis.Jedis;import redis.clients.jedis.JedisCluster;import redis.clients.jedis.JedisPoolConfig;import java.io.FileNotF原创 2017-07-31 01:28:05 · 2983 阅读 · 0 评论 -
Centos7下安装Python3.7保留老版本python2
首先安装依赖包,centos里面是-devel,如果在ubuntu下安装则要改成-dev,依赖包缺一不可,笔者曾安装python3未成功就是因为没有安装libffi-develsudo yum -y groupinstall "Development tools"sudo yum -y install zlib-devel bzip2-devel openssl-devel ncurse...原创 2018-07-08 11:58:47 · 1045 阅读 · 0 评论