手撕zookeeper:作为注册中心负载均衡

作者:潘吉祥


要说最开始接触zookeeper,已经是很久很久以前了,应该是学习dubbo的时候了解的,简单地安装、启动一下,作为dubbo的注册中心。

那个时候觉得挺神奇的,居然能服务注册与发现!但是也仅限于这样的感觉,因为我觉得具体实现对于我来说太遥远了,那种感觉就像我在学习Java基础的时候听到负载均衡、集群这类概念。这么说可能还是没有确切地表达出那种感觉,尤其是作为一个文科生而言。

虽说如此,但是我还是有些不自量力地在简历上写了“熟悉zookeeper”……当然了,打脸的时候总会出现,只是迟早问题,大概一年后:那你说说zk有几种节点类型?我……

不争馒头争口气,自己挖的坑自己得填好,这下怎么也得深入了解一下了。大概也是自己视野开阔的原因,此时抛开zookeeper不说,仔细想想注册中心简单点来说也就是存放对应关系的一个容器而已,再简单点就是一个map映射。有了思路,深入学了学zookeeper,于是开始试着把自己的服务注册到zookeeper。

这里关于zookeeper的知识就不再赘述,你可以把他当做一个存放键值对的数据库,当然zookeeper的功能远不限此。我们直接进入正题:把自己的服务注册到zookeeper并实现负载均衡(关于节点的操作不懂得小伙伴可以先学习一下zookeeper的基本操作)。

开拔之前我们先来理一下思路,这往往是最重要的:

使用maven依赖有zkClient,httpClient.服务均采用了springboot方式创建。

生产者1(注册方)代码(yml配置了服务端口9001),为方便阅读,controller也放到了启动类中:

@SpringBootApplication
@RestController
public class Application {
    public static void main(String[] args) {
        register();
        SpringApplication.run(Application.class,args);
    }

    @GetMapping("/name")
    public String getName(){
        return "9001服务器返回:"+"吉祥君";
    }

    public static void register(){
        //建立连接
        ZkClient zkClient = new ZkClient("192.168.1.23:2181", 5000);
        //创建父节点
        String rootNode = "/name_server";
        if(!zkClient.exists(rootNode)){
            zkClient.createPersistent(rootNode);
        }

        //为了方便观看直接在此定义
        //子节点的名称
        String sonNode = rootNode+"/name_01";
        //子节点的value
        String sonNodeVal = "127.0.0.1:9001";
        //如果不存在
        if(!zkClient.exists(sonNode)){
            zkClient.createEphemeral(sonNode,sonNodeVal);
        }

        System.out.println(sonNode+"服务注册成功!地址:"+"---->"+sonNode);

    }
}

服务提供者二的代码几乎一样,修改的只是controller返回值("9002服务器返回:"+"吉祥君";)、注册子节点的名称(/name_02)和val(127.0.0.1:9001),yml端口:9002。

启动两个服务,我们可以使用zookeeper客户端可视化工具查看节点信息:

此时再看消费者(服务拉取方,当然他也可以把自己注册到zookeeper)端代码,这里没有把controller放在一起因此服务启动时获取的ip集合通过注入bean的方式保存,yml端口8001。

@SpringBootApplication
public class Application {
    public static void main(String[] args) {
        SpringApplication.run(Application.class,args);
    }

    @Bean
    public List<String> serversList(){
        List<String> list = new ArrayList<>();
        //建立连接,此处连接为自己电脑的zookeeper连接
        ZkClient zkClient = new ZkClient("192.168.1.23:2181", 5000);

        String rootNode = "/name_server";
        //得到下面所有的子节点,也就是注册的服务
        List<String> childrens = zkClient.getChildren(rootNode);
        for (String children : childrens) {
            //得到子节点全路径
            String sonPath = rootNode+"/"+children;
            //获取对应的val也就是对应服务的ip
            String sonVal = zkClient.readData(sonPath);
            list.add(sonVal);
        }
    //监听节点变化
        //如果监听到节点变化就刷新服务列表重新拉取
        zkClient.subscribeChildChanges(rootNode, (parentPath,childrensList) ->{

            list.clear();
            for (String children : childrensList) {
                //得到子节点全路径
                String sonPath = rootNode+"/"+children;
                //获取对应的val也就是对应服务的ip
                String sonVal = zkClient.readData(sonPath);
                list.add(sonVal);
            }

        });

        return list;
    }
}

Controller层代码:

@RestController
public class ConsumerController {

    @Autowired
    private List<String> serversList;

    private AtomicInteger init = new AtomicInteger(0);

    @GetMapping("/name")
    public String getName() throws Exception{

        //第一次是0(使用httpclient来请求)
        String s = serversList.get(init.get());
        CloseableHttpClient httpClient = HttpClientBuilder.create().build();
        HttpGet httpGet = new HttpGet("http://"+s+"/name");
        CloseableHttpResponse response = httpClient.execute(httpGet);
        HttpEntity entity = response.getEntity();
If(serversList.size()==1){
  return EntityUtils.toString(entity);
}
        //第一次是0,size=2
        if(init.get() < serversList.size()-1){
            init.getAndIncrement();
            return EntityUtils.toString(entity);
        }
        //如果init不小于serversList.size()-1,重置为0
        init.set(0);

        return EntityUtils.toString(entity);

    }
}

这里使用简单的轮训算法来请求不同的服务,由于springbean默认是单实例的,为了保证线程安全使用了原子类来代替了基本类型操作。当前访问返回结果之前将最终效果如下:如果其中一个服务挂掉了,由于是创建得临时节点,会自动清除,并通知消费者,消费者重新拉取存在的节点信息,达到服务可用。

注意测试的时候由于是强制停掉服务,所以zookeeper的节点通知会延迟,必须等到节点刷新后再访问。

这里注册到zookeeper的rootNode其实就相当于我们微服务中的applicationName,下面的sonNode就相当于一个服务的多个实例喽。

Zookeeper作为注册中心的操作,你看懂了吗?看懂就关注一下呗

Ps(工程Git地址https://github.com/rockit-ba/zookeeper-dubbo.git)

END

【推荐阅读

原创 | 全网最实在的docker入门教程一

原创 | 全网最实在的docker入门教程二

原创 | 全网最实在的docker入门教程三

原创 | 全网最实在的docker入门教程四

老王,快给你的SpringBoot做个埋点监控吧!

没说过这句“口头禅”,不配做程序员!

贼好用的Java工具类库,GitHub星标10k+,你在用吗?


感谢阅读,请扫码关注
明天见
  • 1
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论
什么是Zookeeper Zookeeper是一个分布式开源框架,提供了协调分布式应用的基本服务,它向外部应用暴露一组通用服务——分布式同步(Distributed Synchronization)、命名服务(Naming Service)、集群维护(Group Maintenance)等,简化分布式应用协调及其管理的难度,提供高性能的分布式服务。ZooKeeper本身可以以单机模式安装运行,不过它的长处在于通过分布式ZooKeeper集群(一个Leader,多个Follower),基于一定的策略来保证ZooKeeper集群的稳定性和可用性,从而实现分布式应用的可靠性。 1、Zookeeper是为别的分布式程序服务的 2、Zookeeper本身就是一个分布式程序(只要有半数以上节点存活,zk就能正常服务) 3、Zookeeper所提供的服务涵盖:主从协调、服务器节点动态上下线、统一配置管理、分布式共享锁、统> 一名称服务等 4、虽然说可以提供各种服务,但是zookeeper在底层其实只提供了两个功能: 管理(存储,读取)用户程序提交的数据(类似namenode中存放的metadata);  并为用户程序提供数据节点监听服务; Zookeeper集群机制 Zookeeper集群的角色: Leader 和 follower  只要集群中有半数以上节点存活,集群就能提供服务 Zookeeper特性 1、Zookeeper:一个leader,多个follower组成的集群 2、全局数据一致:每个server保存一份相同的数据副本,client无论连接到哪个server,数据都是一致的 3、分布式读写,更新请求转发,由leader实施 4、更新请求顺序进行,来自同一个client的更新请求按其发送顺序依次执行 5、数据更新原子性,一次数据更新要么成功,要么失败 6、实时性,在一定时间范围内,client能读到最新数据 Zookeeper数据结构 1、层次化的目录结构,命名符合常规文件系统规范(类似文件系统)    2、每个节点在zookeeper中叫做znode,并且其有一个唯一的路径标识  3、节点Znode可以包含数据和子节点(但是EPHEMERAL类型的节点不能有子节点) 节点类型  a、Znode有两种类型: 短暂(ephemeral)(create -e /app1/test1 “test1” 客户端断开连接zk删除ephemeral类型节点)  持久(persistent) (create -s /app1/test2 “test2” 客户端断开连接zk不删除persistent类型节点) b、Znode有四种形式的目录节点(默认是persistent ) PERSISTENT  PERSISTENT_SEQUENTIAL(持久序列/test0000000019 )  EPHEMERAL  EPHEMERAL_SEQUENTIAL c、创建znode时设置顺序标识,znode名称后会附加一个值,顺序号是一个单调递增的计数器,由父节点维护          d、在分布式系统中,顺序号可以被用于为所有的事件进行全局排序,这样客户端可以通过顺序号推断事件的顺序 Zookeeper应用场景 数据发布与订阅(配置中心) 发布与订阅模型,即所谓的配置中心,顾名思义就是发布者将数据发布到ZK节点上,供订阅者动态获取数据,实现配置信息的集中式管理和动态更新。例如全局的配置信息,服务式服务框架的服务地址列表等就非常适合使用。 负载均衡 这里说的负载均衡是指软负载均衡。在分布式环境中,为了保证高可用性,通常同一个应用或同一个服务的提供方都会部署多份,达到对等服务。而消费者就须要在这些对等的服务器中选择一个来执行相关的业务逻辑,其中比较典型的是消息中间件中的生产者,消费者负载均衡。 消息中间件中发布者和订阅者的负载均衡,linkedin开源的KafkaMQ和阿里开源的 metaq都是通过zookeeper来做到生产者、消费者的负载均衡。这里以metaq为例如讲下: 生产者负载均衡:metaq发送消息的时候,生产者在发送消息的时候必须选择一台broker上的一个分区来发送消息,因此metaq在运行过程中,会把所有broker和对应的分区信息全部注册到ZK指定节点上,默认的策略是一个依次轮询的过程,生产者在通过ZK获取分区列表之后,会按照brokerId和partition的顺序排列组织成一个有序的分区列表,发送的时候按照从头到尾循环往复的方式选择一个分区来发送消息。 消费负载均衡: 在消费过程中,一个消费者会消费一个或多个分区

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

码农code之路

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值