Redis 哨兵、集群，ElasticSearch 安装和使用

最新推荐文章于 2024-07-03 19:54:43 发布
最新推荐文章于 2024-07-03 19:54:43 发布
阅读量270 收藏
点赞数
分类专栏： Java 相关 文章标签： java redis
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/liu1shi/article/details/114065012
版权

在这里插入图片描述

  Redis 主从架构。
  这种架构，主节点可以读写，从节点只能读。当主节点挂掉后，整个 redis 服务就不可用了。

  哨兵。
  哨兵可以解决主从架构中的单点故障问题。就是添加的 sentinel1 、sentinel2、sentinel3文件映射。当主节点出现故障时，其中的从节点会成为主节点。


version: '3.1'
services:  
  redis1:
    image: daocloud.io/library/redis:5.0.7
    restart: always
    container_name: redis1
    environment:
      - TZ=Asia/Shanghai
    ports:
      - 7001:6379
    volumes:
      - ./conf/redis1.conf:/usr/local/redis/redis.conf
      - ./conf/sentinel1.conf:/data/sentinel.conf
    command: ["redis-server","/usr/local/redis/redis.conf"]
  redis2:
    image: daocloud.io/library/redis:5.0.7
    restart: always
    container_name: redis2
    environment:
      - TZ=Asia/Shanghai
    ports:
      - 7002:6379
    volumes:
      - ./conf/redis2.conf:/usr/local/redis/redis.conf
      - ./conf/sentinel2.conf:/data/sentinel.conf
    links:
      - redis1:master
    command: ["redis-server","/usr/local/redis/redis.conf"]
  redis3:
    image: daocloud.io/library/redis:5.0.7
    restart: always
    container_name: redis3
    environment:
      - TZ=Asia/Shanghai
    ports:
      - 7003:6379
    volumes:
      - ./conf/redis3.conf:/usr/local/redis/redis.conf
      - ./conf/sentinel3.conf:/data/sentinel.conf
    links:
      - redis1:master
    command: ["redis-server","/usr/local/redis/redis.conf"]



mkdir conf

// 创建多个文件
touch redis1.conf  redis2.conf  redis3.conf sentinel1.conf  sentinel2.conf  sentinel3.conf

// redis2.conf 和 redis3.conf 从节点写入
replicaof master 6379

// sentinel1.conf 写入
# 哨兵需要后台启动
daemonize yes
# 指定Master节点的ip和端口（主）
sentinel monitor master localhost 6379 2
# 指定Master节点的ip和端口（从）
# sentinel monitor master master 6379 2
# 哨兵每隔多久监听一次redis架构
sentinel down-after-milliseconds master 10000

// sentinel2.conf sentinel3.conf 写入
# 哨兵需要后台启动
daemonize yes
# 指定Master节点的ip和端口（主）
# sentinel monitor master localhost 6379 2
# 指定Master节点的ip和端口（从）
sentinel monitor master master 6379 2
# 哨兵每隔多久监听一次redis架构
sentinel down-after-milliseconds master 10000


// 启动 docker
docker-compose up -d

// 进入3个 redis 容器内部，启动 sentinel
docker exec -it 39 bash
redis-sentinel sentinel.conf

// 测试，关闭主节点 哨兵是否起作用
docker stop 39

// 进入另两个 redis 容器内部
docker exec -it a8 bash

redis-cli

// 查看redis 信息，其中一个从节点的 role:master 变为主节点即为成功 
info

  Redis 集群。
  集群在保证主从加哨兵的基本功能之外，还能够提升Redis存储数据的能力。
  集群是无中心的，节点数量必须是 2n + 1。


cd /opt

mkdir docker_redis_jq

cd docker_redis_jq

vi docker-compose.yml



version: "3.1"
services:
  redis1:
    image: daocloud.io/library/redis:5.0.7
    restart: always
    container_name: redis1
    environment:
      - TZ=Asia/Shanghai
    ports:
      - 7001:7001
      - 17001:17001
    volumes:
      - ./conf/redis1.conf:/usr/local/redis/redis.conf
    command: ["redis-server","/usr/local/redis/redis.conf"]
  redis2:
    image: daocloud.io/library/redis:5.0.7
    restart: always
    container_name: redis2
    environment:
      - TZ=Asia/Shanghai
    ports:
      - 7002:7002
      - 17002:17002
    volumes:
      - ./conf/redis2.conf:/usr/local/redis/redis.conf
    command: ["redis-server","/usr/local/redis/redis.conf"]  
  redis3:
    image: daocloud.io/library/redis:5.0.7
    restart: always
    container_name: redis3
    environment:
      - TZ=Asia/Shanghai
    ports:
      - 7003:7003
      - 17003:17003
    volumes:
      - ./conf/redis3.conf:/usr/local/redis/redis.conf
    command: ["redis-server","/usr/local/redis/redis.conf"]  
  redis4:
    image: daocloud.io/library/redis:5.0.7
    restart: always
    container_name: redis4
    environment:
      - TZ=Asia/Shanghai
    ports:
      - 7004:7004
      - 17004:17004
    volumes:
      - ./conf/redis4.conf:/usr/local/redis/redis.conf
    command: ["redis-server","/usr/local/redis/redis.conf"]  
  redis5:
    image: daocloud.io/library/redis:5.0.7
    restart: always
    container_name: redis5
    environment:
      - TZ=Asia/Shanghai
    ports:
      - 7005:7005
      - 17005:17005
    volumes:
      - ./conf/redis5.conf:/usr/local/redis/redis.conf
    command: ["redis-server","/usr/local/redis/redis.conf"]  
  redis6:
    image: daocloud.io/library/redis:5.0.7
    restart: always
    container_name: redis6
    environment:
      - TZ=Asia/Shanghai
    ports:
      - 7006:7006
      - 17006:17006
    volumes:
      - ./conf/redis6.conf:/usr/local/redis/redis.conf
    command: ["redis-server","/usr/local/redis/redis.conf"]



mkdir conf
cd conf 
touch redis1.conf  redis2.conf  redis3.conf  redis4.conf  redis5.conf  redis6.conf

vi redis1.conf

// redis1.conf 写入
# 指定redis的端口号
port 7001
# 开启Redis集群
cluster-enabled yes
# 集群信息的文件
cluster-config-file nodes-7001.conf
# 集群的对外ip地址, 就是虚拟机 ip
cluster-announce-ip 10.36.144.110
# 集群的对外port
cluster-announce-port 7001
# 集群的总线端口
cluster-announce-bus-port 17001

//
vi redis2.conf

// redis2.conf 写入，其他文件依次类推
# 指定redis的端口号
port 7002
# 开启Redis集群
cluster-enabled yes
# 集群信息的文件
cluster-config-file nodes-7002.conf
# 集群的对外ip地址, 就是虚拟机 ip
cluster-announce-ip 10.36.144.110
# 集群的对外port
cluster-announce-port 7002
# 集群的总线端口
cluster-announce-bus-port 17002



// 然后随便进入一个 redis 容器内部，启动集群配置，注意要先启动 docker 管理的 redis，启动当前 docker 时，要先关闭其他有影响的 docker。
redis-cli --cluster create 10.36.144.110:7001 10.36.144.110:7002 10.36.144.110:7003 10.36.144.110:7004 10.36.144.110:7005 10.36.144.110:7006 --cluster-replicas 1

// 启动编辑，如果启动失败，需要先 exit 再执行当前命令。
redis-cli -h 10.36.144.110 -p 7001 -c

// 测试，如果多次设置值随机分配存储节点，说明集群有效
set a 1

  Java 连接 Redis 集群。


	@Test
    public void t9() {

        Set<HostAndPort> nodes = new HashSet<>();
        nodes.add(new HostAndPort("10.36.144.128",7001));
        nodes.add(new HostAndPort("10.36.144.128",7002));
        nodes.add(new HostAndPort("10.36.144.128",7003));
        nodes.add(new HostAndPort("10.36.144.128",7004));
        nodes.add(new HostAndPort("10.36.144.128",7005));
        nodes.add(new HostAndPort("10.36.144.128",7006));

        JedisCluster jedisCluster = new JedisCluster(nodes);

        String s = jedisCluster.set("name", "zs");
        System.out.println(s);

        String res = jedisCluster.get("a");
        System.out.println(res);

    }

  ElasticSearch。
  是一个使用 Java 语言并且基于 Lucene 编写的搜索引擎框架，提供了分布式的全文搜索功能，提供了统一的基于 RESTful 风格的 WEB 接口。
  Lucene 本身就是一个搜索引擎的底层。

  安装 ElasticSearch。虚拟机需要至少 4G 内存。
  需要安装ES、Kibana 和 IK 分词器。


// 虚拟机分配内存
vi /etc/sysctl.conf

// sysctl.conf 写入
vm.max_map_count = 665600

// 使文件生效
sysctl -p

cd /opt
mkdir docker_es
cd docker_es

// 查 ip
ip a | grep ens33

// docker 配置，ip需要改为自己虚拟机 ip
vi docker-compose.yml



version: "3.1"
services:
  elasticsearch:
    image: daocloud.io/library/elasticsearch:6.5.4
    restart: always
    container_name: elasticsearch
    ports:
      - 9200:9200
  kibana:
    image: daocloud.io/library/kibana:6.5.4
    restart: always
    container_name: kibana
    ports:
      - 5601:5601
    environment:
      - elasticsearch_url=http://10.36.144.128:9200
    depends_on:
      - elasticsearch



docker-compose up -d

// 进入 es 容器内部
docker exec -it 84 bash

cd bin

// 下载 IK 分词器
./elasticsearch-plugin install https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v6.5.4/elasticsearch-analysis-ik-6.5.4.zip


//退出 并 重启 ES 容器，让 IK 分词器生效
exit
docker-compose restart

  测试。浏览器输入 http://10.36.144.128:5601/ 进入kibana 图形化操作 es 页面，选择 Dev Tools 添加下面 json，选中执行。注意 { 格式要另起一行。


POST _analyze 
{
  "analyzer": "ik_max_word",
  "text": "玛尔扎哈 迪丽热巴"
}
放气
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
redis集群
qq_38639813的博客
07-04 289
客户端调redis，主写成功，往从备份，从成功告诉主，然后主才给客户端返回告诉操作成功。这样如果从一旦挂了一个，就会不返回了，给人的感觉就是服务有问题了。所以强一致性容易造成集群不可用（不推荐使用） cap：一致性（强一致性）、可用性、分区容错性（集群）。不可兼得最多只能得两个。mysql是ca、redis集群是ap客户端调redis，主写成功立即返回。然后异步告诉从，至于从能否一定写成功不一定。弱一致性容易丢数据（redis主要使用的一种方式） 所以redis的分布式锁其实并不是特别准确，但是对于互联网企
深入学习 Redis Cluster - 基于 Docker、DockerCompose 搭建 Redis 集群，处理故障、扩容方案
CYK_byte的博客
09-17 1804
当前阶段，由于我只有一个 云服务器，搞分布式系统就比较麻烦，而实际工作中，一般是通过多个主机的方式来搭建集群的. 因此这里我会 基于 docker、docker-compose（容器编排） 来搭建 redis 集群.
八股文10：redis学习+Elasticsearch学习（针对项目）
qq_39227541的博客
06-01 941
redis系统学习
利用ElasticSearch和Redis检索和存储十亿信息
水木米
01-18 2888
本文来自Zuhaib Siddique的一次专访，Zuhaib是群聊IM制造商HipChat的生产工程师，下面我们一起看Tod Hoff的整理。 以下为译文： 如果从企业应用的生存率来看，选择企业团队信息作为主要业务，HipChat的起点绝非主流；但是如果从赚钱的角度上看，企业市场的高收益确实值得任何公司追逐，这也正是像JIRA和Confluence这样的智能工具制造商Atlassia
数据存储方案选择：ES、HBase、Redis、MySQL与MongoDB的应用场景分析
最新发布
东境物语
07-03 3193
本文旨在探讨ES、HBase、Redis、MySQL和MongoDB这五种技术的核心特性和优势，通过分析它们在不同应用场景下的表现，为技术选型提供指导和建议。
Elasticsearch与Redis的比较
禅与计算机程序设计艺术
01-21 1500
1.背景介绍 1. 背景介绍 Elasticsearch 和 Redis 都是非关系型数据库，它们在存储和查询数据方面有很多相似之处。然而，它们之间也有很大的区别。Elasticsearch 是一个分布式搜索引擎，主要用于文本搜索和分析，而 Redis 是一个高性能的键值存储系统，主要用于缓存和快速数据访问。在本文中，我们将比较这两种数据库的特点、优缺点以及适用场景，帮助读者更好地了解它们之间...
Window下配置Redis和Elasticsearch
热门推荐
qq_24101357的博客
12-12 8万+
Window下Redis和Elasticsearch的配置 （一）Window下Redis的配置 1.Redis的Window最新版下载 下载地址： https://github.com/microsoftarchive/redis/releases ".msi"是安装版的redis，需要安装才能用 ".zip"是解压版的redis，解压之后就能直接使用（建议下载这个） 解压版下载解压之后...
聊聊redis和Elasticsearch
小叶曲
06-21 8521
redis和Elasticsearch比较 项目 Redis Elasticsearch 介绍 Redis是内存中的数据结构存储，用作数据库，缓存和消息代理 Elasticsearch是一个基于Apache Lucene的现代搜索和分析引擎 主数据库模型 键值存储 搜索引擎 DB-Engines排名 得分120.41总排名第9，key－value存储排名第7 得分120.00总排名第10，搜索引擎排名第1 网站 redis.io
elasticsearch安装与集群建立
chogzyo的博客
03-19 1328
一、工具与环境 1.安装包：elasticsearch-6.0.0.tar.gz 官网下载链接 https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-6.0.0.tar.gz 2.环境：CentOS 7 二、配置ElasticSearch集群 ...
ElasticSearch集群安装及部署，及填坑记录
阿啄debugIT
02-05 531
安装过程 一、建立ElasticSearch应用专用用户 由于ES不允许用root运行，所以需要先创建一个账号给它。 #创建用户组app groupadd app #创建用户elastic useradd -g app elastic #设置密码 passwd elastic #创建安装目录 mkdir /gsww/elastic chown -R elastic:app /gsww/el...
Redis Cluster集群
小yu别错过的博客
11-08 356
为何要搭建Redis集群。Redis是在内存中保存数据的，而我们的电脑一般内存都不大，这也就意味着Redis不适合存储大数据，Redis更适合处理高并发，一台设备的存储能力是很有限的，但是多台设备协同合作，就可以让内存增大很多倍，这就需要用到集群。
15.集群知识（MySQL+Redis+ElasticSearch+RabbitMQ）
onlySunKim的博客
06-19 1125
高可用：主机宕机对业务无影响。宕机原因：网卡、路由器、机房、CPU负载过高、内存溢出、自然灾害等不可预期的原因导致，也称单点问题解决方案：【选主式（双主、raft选举）】重新创建主节点单点性能限制：当单点数据量过大导致性能降低，所以需要多台分担共同存储整个集群数据，并且做好互相备份保证即使单点故障，也能在其他节点找到数据解决方案：【分片式（分库分表）】数据备份容灾：单点故障后，存储的数据仍然可以在别的地方拉起解决方案：【主从复制】
elasticsearch-redis-discovery:用于弹性搜索的 Redis 发现
06-13
弹性搜索-redis-发现 用于弹性搜索的 Redis 发现
Redis系列——哨兵挂了，redis 还能正常工作吗？
守夜人爱吃兔子的博客
07-19 2430
前言 redis 主挂掉了，怎么将请求转移到从上去，如果从是多个，从是怎么进行选举的呢？ 那么就要看我们今天的主角了，redis哨兵，redis哨兵能够帮助我们自动的完成选主和故障转移操作，这次还是会多画图，来加深大家都这个过程的记忆和理解。 redis哨兵都干了什么 redis哨兵是一个运行的特殊的redis进程，他主要有三个使命： 监控 选主 通知 监控的是什么 哨兵主要是监听主库和从库是否存活，怎么进行监控？ 哨兵会定期的给从库发送PING命令，如果从库没有在设定的时间内回复哨兵，那么
Elasticsearch与Redis的整合与应用
禅与计算机程序设计艺术
01-28 1060
1.背景介绍 1. 背景介绍 Elasticsearch 和 Redis 都是非关系型数据库，它们在存储和查询数据方面有着许多相似之处。然而，它们在功能和性能方面有很大的不同。Elasticsearch 是一个基于 Lucene 的搜索引擎，主要用于文本搜索和分析。Redis 是一个高性能的键值存储系统，主要用于缓存和实时数据处理。 在现实应用中，Elasticsearch 和 Redis ...
Elasticsearch：使用 Redis 让 Elasticsearch 更快
Elastic 中国社区官方博客
06-11 3169
Elasticsearch 是一个强大的搜索引擎，可让你快速轻松地搜索大量数据。但是，随着数据量的增长，响应时间可能会变慢，尤其是对于复杂的查询。在本文中，我们将探讨如何使用 Redis 来加快 Elasticsearch 搜索响应时间。
Redis哨兵模式-MongoDB副本集-Elasticsearch架构图
weixin_43183137的博客
01-14 1030
下图是redis哨兵模式1主2从3哨兵，5个节点的副本集，11个分角色节点的ES架构图
Redis缓存数据库商品，ElasticSearch搜索
Black Shadow
12-19 5187
redis keys: redis> keys product view_productview_product_indexview_product_category_{categoryId}_indexproductImage_index ElasticSearch indexName: ehaitao typeName: view_product id: {produc
公司实战 ElasticSearch+Kafka+Redis+MySQL
G823909的博客
12-02 4818
前一段时间公司要进行数据转移，将我们ES数据库中的数据转移到客户的服务器上，并且使用定时将新增的数据同步，在这过程中学到了很多，在此记录一下！ Mysql + Redis + ElasticSearch + Kafka 为了降低服务器的压力，在每天的零时进行推送数据，推送前比较上一次推送记录在Redis中的数据，此记录为ES数据库中的时间字段，每次推送结束前都会将最新的时间更新在这个key中，如果获取ES数据库中的字段与key一样，说明今日无数据更新。因为ES索引的数据量在千万以上，所以没有选择分页，而是选
CentOS7单机快速部署Redis哨兵集群教程
"这篇文档详述了如何在一台CentOS7服务器上部署Redis哨兵集群，适用于Linux其他系统，如Red Hat、Debian、Ubuntu等。对于Linux运维新手，提供了...同时，保持Redis和哨兵的版本更新，以获取最新的安全修复和功能改进。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值