MyCat - 源代码篇(6)

作者简介:大家好,我是smart哥,前中兴通讯、美团架构师,现某互联网公司CTO

联系qq:184480602,加我进群,大家一起学习,一起进步,一起对抗互联网寒冬

学习必须往深处挖,挖的越深,基础越扎实!

阶段1、深入多线程

阶段2、深入多线程设计模式

阶段3、深入juc源码解析


阶段4、深入jdk其余源码解析


阶段5、深入jvm源码解析

码哥源码部分

码哥讲源码-原理源码篇【2024年最新大厂关于线程池使用的场景题】

码哥讲源码【炸雷啦!炸雷啦!黄光头他终于跑路啦!】

码哥讲源码-【jvm课程前置知识及c/c++调试环境搭建】

​​​​​​码哥讲源码-原理源码篇【揭秘join方法的唤醒本质上决定于jvm的底层析构函数】

码哥源码-原理源码篇【Doug Lea为什么要将成员变量赋值给局部变量后再操作?】

码哥讲源码【你水不是你的错,但是你胡说八道就是你不对了!】

码哥讲源码【谁再说Spring不支持多线程事务,你给我抽他!】

终结B站没人能讲清楚红黑树的历史,不服等你来踢馆!

打脸系列【020-3小时讲解MESI协议和volatile之间的关系,那些将x86下的验证结果当作最终结果的水货们请闭嘴】

3. 连接模块

3.3 AbstractConnection:

3.3.2 NIOHandler

NIOHandler实际上就是对于业务处理方法的封装,对于不同的连接有不同的处理方法,也就是不同的NIOHandler

    public interface NIOHandler {
        void handle(byte[] data);
    }

它的实现以及子类会在之后的对应的处理模块细讲。

3.3.3 NIOSocketWR

实现对于AbstractConnection(实际就是对里面封装的channel)进行异步读写,将从channel中读取到的放到AbstractConnection的readBuffer中,将writeBuffer和写队列中的数据写入到channel中。可以这么说,AbstractConnection的方法只对它里面的buffer进行操作,而buffer与channel之间的交互,是通过NIOSocketWR的方法完成的。
下面是它的方法以及对应的说明:

        public void register(Selector selector) throws IOException {
            try {
                processKey = channel.register(selector, SelectionKey.OP_READ, con);
            } finally {
                if (con.isClosed.get()) {
                    clearSelectionKey();
                }
            }
        }
        private void clearSelectionKey() {
            try {
                SelectionKey key = this.processKey;
                if (key != null && key.isValid()) {
                    key.attach(null);
                    key.cancel();
                }
            } catch (Exception e) {
                AbstractConnection.LOGGER.warn("clear selector keys err:" + e);
            }
        }

调用关系:


这个方法就是之前讲的AbstractionConnection与RW线程绑定,AbstractionConnection封装的channel需要在RW线程的selector上注册读事件以监听读事件。

        public void doNextWriteCheck() {
            //检查是否正在写,看CAS更新writing值是否成功
            if (!writing.compareAndSet(false, true)) {
                return;
            }
    
            try {
                //利用缓存队列和写缓冲记录保证写的可靠性,返回true则为全部写入成功
                boolean noMoreData = write0();
                //因为只有一个线程可以成功CAS更新writing值,所以这里不用再CAS
                writing.set(false);
                //如果全部写入成功而且写入队列为空(有可能在写入过程中又有新的Bytebuffer加入到队列),则取消注册写事件
                //否则,继续注册写事件
                if (noMoreData && con.writeQueue.isEmpty()) {
                    if ((processKey.isValid() && (processKey.interestOps() & SelectionKey.OP_WRITE) != 0)) {
                        disableWrite();
                    }
    
                } else {
    
                    if ((processKey.isValid() && (processKey.interestOps() & SelectionKey.OP_WRITE) == 0)) {
                        enableWrite(false);
                    }
                }
    
            } catch (IOException e) {
                if (AbstractConnection.LOGGER.isDebugEnabled()) {
                    AbstractConnection.LOGGER.debug("caught err:", e);
                }
                con.close("err:" + e);
            }
    
        }
        private boolean write0() throws IOException {
            int written = 0;
            ByteBuffer buffer = con.writeBuffer;
            if (buffer != null) {
                //只要写缓冲记录中还有数据就不停写入,但如果写入字节为0,证明网络繁忙,则退出
                while (buffer.hasRemaining()) {
                    written = channel.write(buffer);
                    if (written > 0) {
                        con.netOutBytes += written;
                        con.processor.addNetOutBytes(written);
                        con.lastWriteTime = TimeUtil.currentTimeMillis();
                    } else {
                        break;
                    }
                }
                //如果写缓冲中还有数据证明网络繁忙,计数并退出,否则清空缓冲
                if (buffer.hasRemaining()) {
                    con.writeAttempts++;
                    return false;
                } else {
                    con.writeBuffer = null;
                    con.recycle(buffer);
                }
            }
            //读取缓存队列并写channel
            while ((buffer = con.writeQueue.poll()) != null) {
                if (buffer.limit() == 0) {
                    con.recycle(buffer);
                    con.close("quit send");
                    return true;
                }
                buffer.flip();
                while (buffer.hasRemaining()) {
                    written = channel.write(buffer);
                    if (written > 0) {
                        con.lastWriteTime = TimeUtil.currentTimeMillis();
                        con.netOutBytes += written;
                        con.processor.addNetOutBytes(written);
                        con.lastWriteTime = TimeUtil.currentTimeMillis();
                    } else {
                        break;
                    }
                }
                //如果写缓冲中还有数据证明网络繁忙,计数,记录下这次未写完的数据到写缓冲记录并退出,否则回收缓冲
                if (buffer.hasRemaining()) {
                    con.writeBuffer = buffer;
                    con.writeAttempts++;
                    return false;
                } else {
                    con.recycle(buffer);
                }
            }
            return true;
        }
    
        private void disableWrite() {
            try {
                SelectionKey key = this.processKey;
                key.interestOps(key.interestOps() & OP_NOT_WRITE);
            } catch (Exception e) {
                AbstractConnection.LOGGER.warn("can't disable write " + e + " con "
                        + con);
            }
    
        }
    
        private void enableWrite(boolean wakeup) {
            boolean needWakeup = false;
            try {
                SelectionKey key = this.processKey;
                key.interestOps(key.interestOps() | SelectionKey.OP_WRITE);
                needWakeup = true;
            } catch (Exception e) {
                AbstractConnection.LOGGER.warn("can't enable write " + e);
    
            }
            if (needWakeup && wakeup) {
                processKey.selector().wakeup();
            }
        }

这个doNextWriteCheck方法之前也讲过,看调用关系:


第一个调用关系没意义,WriteEventCheckRunner这个类从没被调用过。
第二个调用很。。。就是将这个方法简单封装,估计是为了好修改,之后会提两种写策略对比。
第三个调用是主要调用,所有往AbstractionConnection中写入都会调用Abstraction.write(ByteBuffer),这个方法先把要写的放入缓存队列,之后调用上面这个doNextWriteCheck方法。
第四个和第五个都是定时检查任务,为了检查是否有AbstractionConnection的写缓存没有写完的情况

    @Override
        public void asynRead() throws IOException {
            ByteBuffer theBuffer = con.readBuffer;
            //如果buffer为空,证明被回收或者是第一次读,新分配一个buffer给AbstractConnection作为readBuffer
            if (theBuffer == null) {
                theBuffer = con.processor.getBufferPool().allocate();
                con.readBuffer = theBuffer;
            }
            //从channel中读取数据,并且保存到对应AbstractConnection的readBuffer中,readBuffer处于write mode,返回读取了多少字节
            int got = channel.read(theBuffer);
            //调用处理读取到的数据的方法
            con.onReadData(got);
        }

这个方法之前也讲过,异步将channel中的数据读取到readBuffer中,之后调用对应AbstractConnection的处理方法。
调用关系:


按理说,应该只有在RW线程检测到读事件之后,才会调用这个异步读方法。但是在FrontendConnection的register()方法和BackendAIOConnection的register()方法都调用了。这是因为这两个方法在正常工作情况下为了注册一个会先主动发一个握手包,另一个会先读取一个握手包。所以都会执行异步读方法。

  • 22
    点赞
  • 29
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值