浅谈nodejs的文件流-Stream

1. Stream是什么?

Stream 是一个抽象接口,Node 中有很多对象实现了这个接口。例如,对http 服务器发起请求的request 对象就是一个 Stream,还有stdout(标准输出)。

2. stream的四种类型
  • Readable - 可读操作。(可读流)
  • Writable - 可写操作。(可写流)
  • Duplex - 可读可写操作.(双工流)
  • Transform - 操作被写入数据,然后读出结果。(转换流)
3. 所有的 Stream 对象都是 EventEmitter 的实例。常用的事件有:
  • data - 当有数据可读时触发。
  • end - 没有更多的数据可读时触发。
  • error - 在接收和写入过程中发生错误时触发。
  • finish - 所有数据已被写入到底层系统时触发。

现在介绍常用的流操作。


可读流

创建 input.txt 文件,内容如下:

浅谈nodejs的文件流-stram

创建 main.js 文件, 代码如下:

var fs = require("fs");
var data = '';

// 创建可读流
var readerStream = fs.createReadStream('input.txt');

// 设置编码为 utf8。
readerStream.setEncoding('UTF8');

// 处理流事件 --> data, end, and error
readerStream.on('data', function(chunk) {
   data += chunk;
});

readerStream.on('end',function(){
   console.log(data);
});

readerStream.on('error', function(err){
   console.log(err.stack);
});

console.log("程序执行完毕");

以上代码执行结果如下:

程序执行完毕
浅谈nodejs的文件流-stram

此处补充在eggjs中如何读取客户端传输过来的文件

详细请参考

const { ctx } = this;
// 适用单文件上传
const stream = await ctx.getFileStream();

写入流

创建 main.js 文件, 代码如下:

var fs = require("fs");
var data = '浅谈nodejs的文件流-stram';

// 创建一个可以写入的流,写入到文件 output.txt 中
var writerStream = fs.createWriteStream('output.txt');

// 使用 utf8 编码写入数据
writerStream.write(data,'UTF8');

// 标记文件末尾
writerStream.end();

// 处理流事件 --> finish、error
writerStream.on('finish', function() {
    console.log("写入完成。");
});

writerStream.on('error', function(err){
   console.log(err.stack);
});

console.log("程序执行完毕");

以上程序会将 data 变量的数据写入到 output.txt 文件中。代码执行结果如下:

$ node main.js 
程序执行完毕
写入完成。

查看 output.txt 文件的内容:

$ cat output.txt 
浅谈nodejs的文件流-stram

管道流

管道提供了一个输出流到输入流的机制。通常我们用于从一个流中获取数据并将数据传递到另外一个流中。
image
如上面的图片所示,我们把文件比作装水的桶,而水就是文件里的内容,我们用一根管子(pipe)连接两个桶使得水从一个桶流入另一个桶,这样就慢慢的实现了大文件的复制过程。

以下实例我们通过读取一个文件内容并将内容写入到另外一个文件中。

设置 input.txt 文件内容如下:

浅谈nodejs的文件流-stram
管道流操作实例

创建 main.js 文件, 代码如下:

var fs = require("fs");

// 创建一个可读流
var readerStream = fs.createReadStream('input.txt');

// 创建一个可写流
var writerStream = fs.createWriteStream('output.txt');

// 管道读写操作
// 读取 input.txt 文件内容,并将内容写入到 output.txt 文件中
readerStream.pipe(writerStream);

console.log("程序执行完毕");

代码执行结果如下:

$ node main.js 
程序执行完毕

查看 output.txt 文件的内容:

$ cat output.txt 
浅谈nodejs的文件流-stram
管道流操作实例

此处补充一个npm包
mz-modules(包装的是一些社区流行的模块)
主要讲一下pump模块;
pump解决了什么问题?
当使用标准的source.pipe(dest),如果dest出现了error,source不会被销毁,而且你无法提供一个回调当pipe被销毁了。pump就是解决上面的两个问题的
// 使用
var pump = require('pump')
var fs = require('fs')

var source = fs.createReadStream('/dev/random')
var dest = fs.createWriteStream('/dev/null')

pump(source, dest, function(err) {
  console.log('pipe finished', err)
})

setTimeout(function() {
  dest.destroy() // when dest is closed pump will destroy source
}, 1000)

链式流

链式是通过连接输出流到另外一个流并创建多个流操作链的机制。链式流一般用于管道操作。

接下来我们就是用管道和链式来压缩和解压文件。

创建 compress.js 文件, 代码如下:

var fs = require("fs");
var zlib = require('zlib');

// 压缩 input.txt 文件为 input.txt.gz
fs.createReadStream('input.txt')
  .pipe(zlib.createGzip())
  .pipe(fs.createWriteStream('input.txt.gz'));
  
console.log("文件压缩完成。");

代码执行结果如下:

$ node compress.js 
文件压缩完成。

执行完以上操作后,我们可以看到当前目录下生成了 input.txt 的压缩文件 input.txt.gz。

接下来,让我们来解压该文件,创建 decompress.js 文件,代码如下:

var fs = require("fs");
var zlib = require('zlib');

// 解压 input.txt.gz 文件为 input.txt
fs.createReadStream('input.txt.gz')
  .pipe(zlib.createGunzip())
  .pipe(fs.createWriteStream('input.txt'));
  
console.log("文件解压完成。");

代码执行结果如下:

$ node decompress.js 
文件解压完成。

此篇参考菜鸟教程

  • 5
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
### 回答1: nodejs-server-wechat-landlordgame-master.zip 是一个基于 Node.js 的服务器代码压缩包,该服务器是用于开发微信地主游戏的。Node.js 是一种基于事件驱动的 JavaScript 运行环境,可以使 JavaScript 在服务器端执行。压缩包中,包含了服务器的相关代码,如游戏逻辑、玩家数据管理、游戏战斗等。利用该服务器,用户可以进行多人在线的地主游戏,游戏结果会通过服务器进行计算。此外,该服务器还提供了一些其他功能,如实时聊天、好友添加等。如果用户想要进行类似微信地主的多人在线游戏开发,可以参考该服务器代码,以便快速地搭建出自己的服务器。同时,需要注意的是,该服务器代码并非完全开源,使用时需要遵循其许可证规定。 ### 回答2: Node.js是一种服务器端JavaScript运行环境,它充分利用了JavaScript的异步和事件驱动性质,使得在高并发的情况下保持高效率和可扩展性变得更加容易。wechat-landlordgame-master.zip是一个基于Node.js的群聊斗地主游戏的代码库。使用该代码库可以快速地构建一个在线的斗地主游戏,具有聊天室和游戏大厅等功能。游戏通过WebSocket实现实时通信,并且支持不同用户之间的文件上传、下载、转发和共享。该代码库提供了完整的代码和文档,易于理解和使用。同时,全面的单元测试和持续集成使得该代码库的质量得到了保证。该项目不仅展示了Node.js在构建在线游戏方面的优越性,也展现了软件开发质量保证的最佳实践。该代码库可作为学习Node.js技术和实践敏捷开发的一个好例子。 ### 回答3: nodejs-server-wechat-landlordgame-master.zip 这个文件是一个JavaScript项目的压缩包,在这个项目中,使用Node.js作为服务器,在微信公众号中实现了斗地主游戏。 作为一个JavaScript项目,使用Node.js作为服务器,可以实现高效的通信和数据处理,同时具有强大的扩展性和灵活性,方便后续的项目更新和维护。 在这个项目中,使用微信公众号作为前端界面,用户可以在公众号内体验斗地主游戏。在微信公众号平台,用户可以快速分享和传播,提高了游戏的曝光率和用户量。 同时,这个项目的作者还给出了详细的使用说明,方便其他开发者进行学习和参考。这种开放式的项目精神,促进了开源社区的发展和技术共享。 总之,nodejs-server-wechat-landlordgame-master.zip 是一个使用Node.js作为服务器,在微信公众号中实现斗地主游戏的JavaScript项目,具有高效的通信和数据处理能力,同时适用于开源社区中的技术共享和学习。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值