NodeJs服务器的Buff缓冲区导致进程阻塞踩坑实录

最新推荐文章于 2024-03-17 20:00:00 发布
最新推荐文章于 2024-03-17 20:00:00 发布
阅读量272 收藏
点赞数 2
分类专栏： nodejs 踩坑 文章标签： node.js
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/j1nab1n9/article/details/119918575
版权

NodeJs服务器的Buff缓冲区导致进程阻塞踩坑实录

这边记录一个前两天项目上线时遇到的恶心bug！

我们游戏提供http接口服务的Nodejs服务器在启动后5-10分钟会突然卡死，无法处理任何请求。（具体表现类似于程序代码死循环）

在一个小时的排查之后确认了是我们的其中一个接口，他在返回数据时申请的buff()缓冲区的空间尺寸没有被完全使用导致了整个服务器进程阻塞。
在这里插入图片描述
在特定的参数条件下，iLength会是我们要发回游戏服务器的数据包的实际大小的两倍，后续将整个buff写入tcp连接时，就导致了阻塞。

修复方式

对ilength添加长度判断，使得每次申请的buffer长度都不会太大，并在tcpConn（我自己的变量名）写入buff时check一下是否合法。

J1nAB1n9
关注
  • 2
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
nodejs篇 Buffer模块
秋来九月八
02-16 1060
Buffer对象是Node处理二进制数据的一个接口。它是Node原生提供的全局对象，可以直接使用，不需要require(‘buffer’)。JavaScript比较擅长处理字符串，对于处理二进制数据（比如TCP数据流），就不太擅长。Buffer对象就是为了解决这个问题而设计的。它是一个构造函数，生成的实例代表了V8引擎分配的一段内存，是一个类似数组的对象，成员都为0到255的整数值，即一个8位的字节。
nodejs中的阻塞和非阻塞（https://nodejs.org/en/docs/guides/blocking-vs-non-blocking/）
cotexarm7的专栏
02-01 1350
一、简述这片文章主要讲述Nodejs中的阻塞和非阻塞回调，涉及到事件循环和libuv。但是你并不需要提前了解这些知识，你只需要具备js和Nodejs回调模式的基础。"I/O"指的是与系统硬盘的交互以及libuv所支持的网络交互。1.Blocking阻塞1.1代码对比阻塞指的是Nodejs中的js进程必须等待非js操作完成之后才能执行，原因是当阻塞操作发生时，事件循环无法持续运行。在nodejs中，...
Node.js 应用故障排查手册 —— 类死循环导致进程阻塞 ...
weixin_34232363的博客
04-13 914
楔子 在实践篇一中我们看到了两个表象都是和 CPU 相关的生产问题，它们基本也是我们在线上可能遇到的这一类问题的典型案例，而实际上这两个案例也存在一个共同点：我们可以通过Node.js 性能平台导出进程对应的 CPU Profile 信息来进行分析定位问题，但是实际在线上的一些极端情况下，我们遇到的故障是没有办法通过轻量的 V8 引擎暴露的 CPU...
NodeJs之回调、阻塞、事件驱动
海枫的博客
06-04 690
进行nodeJSdemo级别的学习 回调函数 异步编程依托于回调来实现，但不能说使用了回调后程序就异步化了 回调函数在完成任务后就会被调用，Node使用大量的回调函数，Node所有API都支持回调函数。 案例 我们可以一边读取文件，一边执行其他命令，在文件读取完成后，我们将文件内容作为回调函数的参数返回，这样在执行代码时就没有阻塞或等待文件I/O操作， 好处提高NodeJS的性能，可以处理大量额并发请求。 CodeDemo 阻塞代码示例 创建一个文件 input.txt 我要赚钱 小记: 以前我.
node.js之Buffer
weixin_44136421的博客
05-24 180
Bufer 是一个类似于数组的 对象，用于表示固定长度的字节序列。Buffer 本质是一段内存空间，专门用来处理 二进制数据。2，Bufer 性能较好，可以直接对计算机内存进行操作。3，每个元素的大小为 1字节 (byte)1，Buffer 大小固定且无法调整。
node-block-queue:Nodejs进程内阻塞FIFO队列实现
06-07
Nodejs阻塞队列 Nodejs 进程内阻塞 FIFO 队列实现。 具有最大并发的队列。 npm install block-queue 例子 var queue = require ( 'block-queue' ) ; var q = queue ( 1 , function ( task , done ) { // working on task.. done ( ) ; } ) ; q . push ( 'task1' ) ; q . push ( 'task2' ) ; q . push ( 'task3' ) ; 另请参阅： 和 。 API 参考 queue([cocurrency, ]reducer) cocurrency ，整数，可选，默认值：1 reducer , function, required应该用2个参数调用：task，done。
nodejs基础之buffer缓冲区用法分析
10-17
主要介绍了nodejs基础之buffer缓冲区用法,结合实例形式分析了buffer缓冲区的概念、功能、创建、读写等相关操作技巧,需要的朋友可以参考下
轻松创建nodejs服务器（7）：阻塞操作的实现
10-25
主要介绍了轻松创建nodejs服务器（7）：阻塞操作的实现,本文先是组出了代码,然后对代码一一分析,需要的朋友可以参考下
轻松创建nodejs服务器（9）：实现非阻塞操作
10-25
主要介绍了轻松创建nodejs服务器（9）：实现非阻塞操作,本系列文章会教你一步一步创建一个完整的服务器,要的朋友可以参考下
node-struct:轻松使用NodeJS中的缓冲区
05-06
NodeJS模块可将缓冲区用作各种字段（例如c struct声明或pascal记录）的结构（或记录）。 安装 要使用安装： npm install struct 例子 定义一些结构： var Struct = require('struct'); var Person = Struct() ....
nodejs 阻塞与非阻塞
怖呆的博客。
07-18 3053
nodejs 是基于驱动事件的非阻塞I/O模型，node 中所有的api 都支持回调函数，为什么要这么做？这么做有什么优点？阻塞读取var fs = require('fs'); var data = fs.readFileSync('1.txt'); console.log(data); console.log('读取文件');/* 输出的结果: 读取的内容 读取文件 */非阻塞读
Node.js教程-Buffer对象
旺仔的博客
12-19 1382
Buffer对象是Node用于在网络或文件系统操作等场景中处理二进制数据流。用于表示固定长度的字节序列。一个Buffer类似于一个整数数组，它对应了 V8 堆之外的一块原始内存。Buffer在Node是一个全局变量，无需通过require关键字来导入其模块。在V6.0前创建Buffer对象直接使用new关键字来创建实例，但其对内存的权限操作比较大，可直接捕获一些敏感信息，所以在V6.0之后，官方建议使用接口去创建其对象。
Nodejs入门基础（Stringbuff知识点）
JayVergil的博客
10-30 952
/*Stringbuff  NODE其中一个模块*/     /*第一种构造方式*/     var buf1=Buffer.alloc(10,16);     console.log(buf1);//十六进制     var buf2=Buffer.alloc(10,"a");     console.log(buf2);//a:97 a:67=^*16+1     /*第一种构造方式*/ ...
Node.js 的 Buffer 是什么？探索其用途与功能
最新发布
nhb687096的博客
03-17 1031
Node.js 的 Buffer 是一个用于处理二进制数据的重要工具，它提供了高效的内存操作机制，特别适用于处理网络流、文件操作等 I/O 相关的任务。本文介绍了如何创建、操作 Buffer 对象，并通过一个简单的实践案例演示了如何在基本的 Node.js 服务器中使用 Buffer。这些资料，对于【软件测试】的朋友来说应该是最全面最完整的备战仓库，这个仓库也陪伴上万个测试工程师们走过最艰难的路程，希望也能帮助到你！
nodejs --buffer模块(三) buffer的操作和属性
疯子在左疯子在右
08-12 1172
全局方法 Buffer.byteLength(string, encoding) 返回字符串实际字节的长度.   Buffer.compare(buf1, buf2) 比较两个buffer的前后顺序 等价于buffer1.compare(buf2)   Buffer.concat(List<Buffer>, length) 合并buffer   参数 List<b...
Node.js：创建应用+回调函数（阻塞/非阻塞）+事件循环
weixin_34117522的博客
05-06 115
一、创建应用 　　如果我们使用PHP来编写后端的代码时，需要Apache 或者 Nginx 的HTTP 服务器，并配上 mod_php5 模块和php-cgi。从这个角度看，整个"接收 HTTP 请求并提供 Web 页面"的需求根本不需要 PHP 来处理。 　　不过对 Node.js 来说，概念完全不一样了。使用 Node.js 时，我们不仅仅在实现一个应用，同时还实现了整个 HTTP 服务器。事...
非堵塞connect用法及常见错误
07-06 1089
在一个TCP套接口被设置为非阻塞之后调用connect,connect会立即返回EINPROGRESS错误,表示连接操作正在进行中,但是仍未完成;同时TCP的三路握手操作继续进行;在这之后,我们可以调用select来检查这个链接是否建立成功;非阻塞connec
Nodejs——Buffer(缓冲器)
LSH_的个人博客
06-28 2458
Buffer 本质是一段内存空间，专门用来处理。Buffer 是一个类似于数组的。方法将 Buffer 转为字符串。toString 默认是按照。，用于表示固定长度的字节序列。Buffer 可以直接通过。的方式对数据进行处理。编码方式进行转换的。
【Nodejs】Nodejs中Buffer的使用
老司机的后备箱
10-17 2455
JavaScript 对于字符串（string）的操作十分友好，无论是宽字节字符串还是单字节字符串，都被认为是一个字符串。console.log("你好，世界！".length);// 12// 1let str = String::from("你好，世界！");println!// 18这是因为 Rust 中的 String 类型本身就是基于数组vec进行的封装，数组每个元素都是一个u8类型的元素，而 JavaScript 的 String 类型的抽象程度要更为高。
nodejs服务器托管
03-07
Node.js服务器托管是指将Node.js应用程序部署到云服务器或托管服务商上，以便通过互联网提供服务。以下是一些常见的Node.js服务器托管方式： 1. 云服务器：你可以租用云服务器（如AWS EC2、阿里云ECS等），在服务器...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值