NIO编程需要解决的Epoll Bug

最新推荐文章于 2024-04-22 17:30:31 发布
最新推荐文章于 2024-04-22 17:30:31 发布
阅读量557 收藏 2
点赞数
分类专栏： IO技术 文章标签： epoll java netty nio
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_37687594/article/details/107028369
版权

1. bug表现

在这里插入图片描述

  • 正常情况下，selector.select()操作是阻塞的，只有被监听的fd有读写操作时，才被唤醒
  • 但是，在这个bug中，没有任何fd有读写请求，但是select()操作依旧被唤醒
  • 很显然，这种情况下，selectedKeys()返回的是个空数组
  • 然后按照逻辑执行到while(true)处，循环执行，导致死循环。

2. bug 原因

在部分Linux的2.6的kernel中，poll和epoll对于突然中断的连接socket会对返回的eventSet事件集合置为POLLHUP，也可能是POLLERR，eventSet事件集合发生了变化，这就可能导致Selector会被唤醒。

3. 解决办法

在比如jetty , netty 中都有相应的解决方案，最终的终极办法是创建一个新的Selector。

njitzyd
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
java epoll bug_NIO的epoll空轮询bug
weixin_31776191的博客
02-13 1698
JDK NIO的BUG，例如臭名昭著的epoll bug，它会导致Selector空轮询，最终导致CPU 100%。官方声称在JDK1.6版本的update18修复了该问题，但是直到JDK1.7版本该问题仍旧存在，只不过该BUG发生概率降低了一些而已，它并没有被根本解决。该BUG以及与该BUG相关的问题单可以参见以下链接内容。Selector BUG出现的原因若Selector的轮询结果为空，也没...
异步 IO 机制 io_uring
weixin_44585214的博客
04-19 192
【代码】异步 IO 机制 io_uring。
Java NIO 网络编程初探
12-22
Java NIO 网络编程初探 1. Java NIO Java 1.4 版本添加了一个新的IO API，称为NIO（New IO）。NIO拥有所有IO的功能，但是操作方法却完全不一样。NIO支持面向缓冲区的、基于通道的IO操作。能够更加高效的进行IO操作。NIO同样拥有文件读写，网络通信等IO操作，今天我们来看看NIO中的TCP网络通信的使用方法。 2. Java NIO 三大核心 Java NIO 有三大核心要素：Channel、Buffer和Selector。Java IO 的操作都是基于输入输出流的，而NIO则是基于Channel和Buffer的，数据先被读取到Buffer中，然后再进
select，poll，epoll对比及epoll空轮询
半桶水的博客
04-23 687
目录 一、select，poll，epoll对比 1.select 2.poll 3.epoll 4.总结 二、epoll空轮询bug及处理 1.Selector BUG出现的原因 2.Netty的解决办法 一、select，poll，epoll对比 1.select 支持一个进程所能打开的最大连接数 单个进程所能打开的最大连接数有FD_SETSIZE宏定义，其大小是32个整数的大小（在32位的机器上，大小就是3232，同理64位机器上FD_SETSIZE为3264），当然我们可以
Netty巧妙的规避了JDK在linux中NIO的epoll的空轮询Bug
HD243608836的博客
03-16 1254
一、NIO的空轮询bug描述 JDK1.5开始引入了epoll基于事件响应机制来优化NIO。相较于select和poll机制来说，epoll机制将事件处理交给了操作系统内核(操作系统硬中断)来处理，优化了elect和poll模型的无效遍历问题。 但是JDK中epoll的实现却是有漏洞的，其中最有名的就是NIO空轮询bug（该bug只存在于Linux，因为Linux中NIO底层是使用epoll实现的，而Windows不是）。 理论上无客户端连接时Selector.select() 方法会阻塞，但空轮询b.
EPOLL水平触发模式（EPOLLT）和EPOLL边缘触发模式（EPOLLET）
scarificed的博客
12-23 2792
epoll+线程池高并发服务器模型在测试的时候产生bug。 bug1：一个客户端连接，服务器却添加了多次业务。 bug2：很多消费者线程被占用 ，导致消费者线程扩容。 1、客户端一次请求，服务端却添加多次业务？ 采用epoll监听socket的网络事件，某一时刻serverfd事件就绪 ，serverfd就会变成就绪态socket，需要处理serverfd上的事件，处理就绪的serverfd。clientfd就绪同理。无论是serverfd还是clientfd，变成就绪态的socket，我们一定要处理完就绪
NIO中存在的bug—epoll空轮询
小弟_liao的博客
11-06 370
IO&NIO介绍 IO读取 NIO读取 NIO中epoll空轮询表现 public static void main(String[] args) { Selector selector = Selector.open(); System.out.println(selector.isOpen()); ServerS...
NIO中Epoll Bug产生的原因以及Netty中是如何解决的
yygr的博客
04-18 1976
https://blog.csdn.net/speakguoer/article/details/120132750 https://blog.csdn.net/qq_40751552/article/details/111715056 文章目录 产生原因 Java官方解释 问题复现 产生原因 正常情况下，select()方法在没有事件时，程序一直阻塞在该方法，但是在没有任何事件的情况下，该方法被唤醒，但是在程序对seclectionKey进行遍历时，却没有任何k
Netty源码解析-Netty解决Nio epoll bug
恐龙弟旺仔的博客
12-30 1264
前言： Netty作为一个优秀的NIO框架，不仅仅是对JDK NIO的使用进行封装，使其更易用，而且对其一些原生BUG也进行了修复。其中epoll cpu 100%的一个bug的修复更是经典。 1.bug产生的场景 常规使用NIO ServerSocket来接收连接的方式如下： Selector selector = Selector.open(); while (true) { int count = selector.select(); Set<SelectionKe
JDK Epoll空轮询bug
傅红雪的专栏
02-02 721
前面讲到了epoll的一些机制，与select和poll等传统古老的IO多路复用机制的一些区别，这些区别实质可以总结为一句话，就是epoll将重要的基于事件的fd集合放在了内核中来完成，因为内核是高效的，所以很多关于fd事件监听集合的操作也是高效的，不方便的就是，因为在内核中，所以我们需要通过系统调用来调用关于fd操作集合，而不是直接自己攒一个。如果在linux中，epoll在JDK6中还需要配置，在后续的版本中为JDK的NIO提供了默认的实现，但是epoll在JDK中的实现却是漏洞百出的，bug非常的多，
Netty的epoll空轮询bug解决
Hanyinh的博客
04-20 1190
【Netty基础】Netty的高性能及NIO的epoll空轮询bug Selector BUG出现的原因： 若Selector的轮询结果为空，也没有wakeup或新消息处理，则会一直空轮询，占用CPU，导致CPU使用率100%， Netty的解决办法： 1、对Selector的select操作周期进行统计，每完成一次空的select操作进行一次计数， 2、若在某个周期内达到了N次的空轮询，则会触发epoll死循环bug。 3、将问题Selector上注册的Channel转移到新建的Selector上； 4
NIO网络编程
12-22
NIO网络编程 Selector选择器 进行监听，是新连接或已经连接，读写数据 常用方法 public static Selector Open(); 得到一个选择器对象 public int select(long timeout); 监听所有注册通道，存在IO流操作，将对应...
NIO网络编程-简易聊天室
08-07
内含详细注释，可以帮助小白理解熟悉NIO网络编程的具体步骤。其中NioServer是服务器端，NioClient是客户端，AClient、BClient、CClient是具体的客户。通过服务端和客户端的Channel通道，客户可以进行读写操作。在...
Java NIO 编程指引
06-30
Java,NIO,教程 非堵塞IO编程
NIO网络编程原理与实战.xmind
05-26
https://blog.csdn.net/ykmeory/article/details/115603895
socket套接字在tcp客户端与tcp服务器之间的通信，以及socket中常用的高效工具epoll
y_bra_ke的博客
04-18 257
Socket是对TCP/IP协议的封装，Socket本身并不是协议，而是一个调用接口（API），通过Socket，我们才能使用TCP/IP协议,主要利用三元组【ip地址，协议，端口】创建Socket连接时，可以指定使用的传输层协议，socket可以支持不同的传输层协议（TCP/UDP），当使用TCP协议进行连接时，该socket接连就是TCP链接.
协程库-IO协程调度器
heitong_fu的博客
04-21 657
共享指针提供了自动内存管理的功能，但在某些特殊情况下，为了确保资源被正确释放，使用自定义删除器函数。
网络IO模型 select poll epoll的区别
最新发布
m0_60259116的博客
04-22 922
网络IO模型 select poll epoll的区别
IO基础-IO多路复用基础
技术分子博客
04-18 369
I/O多路复⽤与传统的多线程/多进程模型相⽐，I/O多路复⽤的最⼤优势是系统开销⼩，系统不需要创建新的额外进程或者线程，也不需要维护这些线程和进程的运⾏行，降低了系统的维护⼯作量，节省了系统的资源。-Djava.nio.channels.spi.SelectorProvider=sun.nio.ch.EPollSelectorProvider 或者不指定，则底层调用epoll。1、epoll使用了红黑树来保存需要监听的文件描述符事件，epoll_ctl增删改操作快速。3、⽤用户态和内核态切换。
NIO多路复用epoll
10-04
NIO（Non-blocking I/O）是一种非阻塞的 I/O 模型，通过使用单线程管理多个并发的连接，实现了高效的 I/O 处理。而多路复用是 NIO 实现非阻塞的关键技术之一，其中 epoll 是 Linux 内核提供的一种高效的多路复用机制。 在 NIO 中，可以使用 select 或 epoll 函数实现多路复用。select 是一种较为简单的多路复用机制，它能够同时监听多个文件描述符，并在这些文件描述符中有可读、可写或异常事件发生时进行通知。而 epoll 是 select 的一种改进，它通过注册事件的方式，只关注发生事件的文件描述符，避免了遍历全部文件描述符的开销。 epoll 使用三个系统调用来操作事件： 1. epoll_create：创建一个 epoll 实例，返回一个文件描述符。 2. epoll_ctl：注册、修改或删除事件。 3. epoll_wait：等待事件发生，返回发生事件的文件描述符列表。 与 select 相比，epoll 有以下优势： - 无需遍历全部文件描述符，只关注发生事件的文件描述符，提高了效率。 - 支持水平触发和边缘触发两种模式，可以根据需求选择适当的模式。 - 支持更大的并发连接数。 在 Redis 中，它使用 epoll 和多个 I/O 线程来处理客户端请求。epoll 负责监听客户端的连接和数据事件，并将事件交给 I/O 线程进行处理，这样可以充分发挥多核 CPU 的优势，提高了 Redis 服务器的性能。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值