Node.js Streams文件读写操作详解


Posted in Javascript onJuly 04, 2016

Node.js 天生异步和事件驱动,非常适合处理 I/O 相关的任务。如果你在处理应用中 I/O 相关的操作,你可以利用 Node.js 中的流(stream)。因此,我们先具体看看流,理解一下它们是怎么简化 I/O 操作的吧。 

流是什么
流是 unix 管道,让你可以很容易地从数据源读取数据,然后流向另一个目的地。
简单来说,流不是什么特别的东西,它只是一个实现了一些方法的 EventEmitter 。根据它实现的方法,流可以变成可读流(Readable),可写流(Writable),或者双向流(Duplex,同时可读可写)。
可读流能让你从一个数据源读取数据,而可写流则可以让你往目的地写入数据。
如果你已经用过 Node.js,你很可能已经遇到过流了。
例如,在一个 Node.js 的 HTTP 服务器里面, request 是一个可读流, response 是一个可写流。
你也可能用过 fs 模块,它能帮你处理可读可写流。
 现在让你学一些基础,理解不同类型的流。本文会讨论可读流和可写流,双向流超出了本文的讨论范围,我们不作讨论。
 可读流 (Readable Streams)
 我们可以用可读流从一个数据源中读取数据,这个数据源可以是任何东西,例如系统中的一个文件,内存中的 buffer,甚至是其他流。因为流是 EventEmitter ,它们会用各种事件发送数据。我们会利用这些事件来让流工作。

从流中读取数据
 从流中读取数据最好的方式是监听 data 事件,添加一个回调函数。当有数据流过来的时候,可读流会发送 data 事件,回调函数就会触发。看看下面的代码片段:

var fs = require('fs');
var readableStream = fs.createReadStream('file.txt');
var data = '';

var readableStream.on('data', function(chunk){
 data += chunk;
});

readableStream.on('end', function(){
 console.log(data);
});

fs.createReadStream 会给你一个可读流。
最开始的时候,这个流不是流动态的。当你添加了 data 的事件监听器,加上一个回调函数时,它才会变成流动态的。在这之后,它就会读取一小块数据,然后传到你的回调函数里面。
流的实现者决定了 data 事件的触发频率,例如 HTTP request 会在读取到几 KB 数据的时候触发 data 事件。 当你从一个文件中读取数据的时候,你可能会决定当一行被读完的时候就触发 data 事件。
当没有数据可读的时候 (读到文件尾部时),流就会发送 end 事件。在上面的例子中,我们监听了这个事件,当读完文件的时候,就把数据打印出来。
还有另一种读取流的方式,你只要在读到文件尾部前不断调用流实例中的 read() 方法就可以了。

var fs = require('fs');
var readableStream = fs.createReadStream('file.txt');
var data = '';
var chunk;

readableStream.on('readable', function(){
 while ((chunk = readableStream.read()) != null) {
 data += chunk;
 }
});

readableStream.on('end', function(){
 console.log(data);
});

read() 方法会从内部 buffer 中读取数据,当没有数据可读的时候,它会返回 null 。
因此,在 while 循环中我们检查 read() 是不是返回 null ,当它返回 null 的时候,就终止循环。
需要注意的是,当我们可以从流中读取数据的时候, readable 事件就会触发。
设置编码
默认情况下,你从流中读取到的是 Buffer 对象。如果你要读取的是字符串的话,这并不适合你。因此,你可以像下面的例子那样通过调用 Readable.setEncoding() 来设置流的编码:

var fs = require('fs');
var readableStream = fs.createReadStream('file.txt');
var data = '';

readableStream.setEncoding('utf8');

readableStream.on('data', function(chunk){
 data += chunk;
});

readableStream.on('end', function(){
 console.log(data);
});

上面的例子中,我们把流的编码设置成 utf8 ,数据就会被解析成 utf8 ,回调函数中的 chunk 就会是字符串了。
管道 (Piping)
管道是一个很棒的机制,你不需要自己管理流的状态就可以从数据源中读取数据,然后写入到目的地中。我们先看看下面的例子:

var fs = require('fs');
var readableStream = fs.createReadStream('file1.txt');
var writableStream = fs.createWriteStream('file2.txt');

readableStream.pipe(writableStream);

上面的例子利用 pipe() 方法把 file1 的内容写到 file2 中。因为 pipe() 会帮你管理数据流,你不需要担心数据流的速度。这让 pipe() 变得非常简洁易用。
需要注意的是, pipe() 会返回目的地的流,因此你可以很轻易让多个流链接起来!
链接 (Chaining)
假设有一个归档文件,你想要解压它。有很多方式可以完成这个任务。但最简洁的方式是利用管道和链接:

var fs = require('fs');
var zlib = require('zlib');

fs.createReadStream('input.txt.gz')
 .pipe(zlib.createGunzip())
 .pipe(fs.createWriteStream('output.txt'));

首先,我们通过 input.txt.gz 创建了一个可读流,然后让它流 zlib.createGunzip() 流,它会解压内容。最后,我们添加一个可写流把解压后的内容写到另一个文件中。
其他方法
 我们已经讨论了一些可读流中重要的概念了,这里还有一些你需要知道的方法:
 1.Readable.pause() ? 这个方法会暂停流的流动。换句话说就是它不会再触发 data 事件。
 2.Readable.resume() ? 这个方法和上面的相反,会让暂停流恢复流动。
 3.Readable.unpipe() ? 这个方法会把目的地移除。如果有参数传入,它会让可读流停止刘翔某个特定的目的地,否则,它会移除所有目的地。 

可写流 (Writable Streams)
可写流让你把数据写入目的地。就像可读流那样,这些也是 EventEmitter ,它们也会触发不同的事件。我们来看看可写流中会触发的事件和方法吧。
写入流 
要把数据写如到可写流中,你需要在可写流实例中调用 write() 方法,看看下面的例子:

var fs = require('fs');
var readableStream = fs.createReadStream('file1.txt');
var writableStream = fs.createWriteStream('file2.txt');

readableStream.setEncoding('utf8');

readableStream.on('data', function(chunk){
 writableStream.write('chunk');
});

上面的代码非常简单,它只是从输入流中读取数据,然后用 write() 写入到目的地中。
 这个方法返回一个布尔值来表示写入是否成功。如果返回的是 true 那表示写入成功,你可以继续写入更多的数据。 如果是 false ,那意味着发生了什么错误,你现在不能继续写入了。可写流会触发一个 drain 事件来告诉你你可以继续写入数据。
 写完数据后
 当你不需要在写入数据的时候,你可以调用 end() 方法来告诉流你已经完成写入了。假设 res 是一个 HTTP response 对象,你通常会发送响应给浏览器:
res.write('Some Data!!');
res.end();
当 end() 被调用时,所有数据会被写入,然后流会触发一个 finish 事件。注意在调用 end() 之后,你就不能再往可写流中写入数据了。例如下面的代码就会报错:
res.write('Some Data!!');
res.end();
res.write('Trying to write again'); //Error !
这里有一些和可写流相关的重要事件:
 1.error ? 在写入或链接发生错误时触发
 2.pipe ? 当可读流链接到可写流时,这个事件会触发
 3.unpipe ? 在可读流调用 unpipe 时会触发

以上就是本文的全部内容,希望对大家的学习有所帮助,也希望大家多多支持三水点靠木。

Javascript 相关文章推荐
跟着Jquery API学Jquery之一 选择器
Apr 07 Javascript
基于jquery的仿百度的鼠标移入图片抖动效果
Sep 17 Javascript
在jQuery 1.5中使用deferred对象的代码(翻译)
Mar 10 Javascript
js正则表达式中test,exec,match方法的区别说明
Jan 29 Javascript
js的Prototype属性解释及常用方法
May 08 Javascript
js判断浏览器版本以及浏览器内核的方法
Jan 20 Javascript
Jquery动态添加输入框的方法
May 29 Javascript
jQuery实现简单下拉导航效果
Sep 07 Javascript
JS及PHP代码编写八大排序算法
Jul 12 Javascript
利用纯Vue.js构建Bootstrap组件
Nov 03 Javascript
vue之延时刷新实例
Nov 14 Javascript
vue 实现根据data中的属性值来设置不同的样式
Aug 04 Javascript
jQuery文字提示与图片提示效果实现方法
Jul 04 #Javascript
jQuery实现的导航下拉菜单效果
Jul 04 #Javascript
表单中单选框添加选项和移除选项
Jul 04 #Javascript
jQuery实现简单倒计时功能的方法
Jul 04 #Javascript
jquery设置表单元素为不可用的简单代码
Jul 04 #Javascript
JavaScript 节流函数 Throttle 详解
Jul 04 #Javascript
jQuery实现订单提交页发送短信功能前端处理方法
Jul 04 #Javascript
You might like
PHP 判断常量,变量和函数是否存在
2009/04/26 PHP
PHP 分页原理分析,大家可以看看
2009/12/21 PHP
shopex中集成的站长统计功能的代码简单分析
2011/08/11 PHP
用php守护另一个php进程的例子
2015/02/13 PHP
php中对象引用和复制实例分析
2019/08/14 PHP
node.js实现逐行读取文件内容的代码
2014/06/27 Javascript
nodejs中转换URL字符串与查询字符串详解
2014/11/26 NodeJs
举例说明如何为JavaScript的方法参数设置默认值
2015/11/17 Javascript
基于JavaScript如何制作遮罩层对话框
2016/01/26 Javascript
JS显示日历和天气的方法
2016/03/01 Javascript
JavaScript中windows.open()、windows.close()方法详解
2016/07/28 Javascript
浅谈Angular4中常用管道
2017/09/27 Javascript
分享ES6的7个实用技巧
2018/01/18 Javascript
使用pkg打包ThinkJS项目的方法步骤
2019/12/30 Javascript
[02:56]DOTA2上海特锦赛小组赛解说FreeAgain采访花絮
2016/02/27 DOTA
Python 学习笔记
2008/12/27 Python
详解Python使用simplejson模块解析JSON的方法
2016/03/24 Python
Pycharm远程调试openstack的方法
2017/11/21 Python
Python学习之用pygal画世界地图实例
2017/12/07 Python
python实现决策树分类(2)
2018/08/30 Python
关于Python作用域自学总结
2019/06/10 Python
python实现合并多个list及合并多个django QuerySet的方法示例
2019/06/11 Python
Python 的AES加密与解密实现
2019/07/09 Python
Python如何应用cx_Oracle获取oracle中的clob字段问题
2019/08/27 Python
Python3 mmap内存映射文件示例解析
2020/03/23 Python
13个Pandas实用技巧,助你提高开发效率
2020/08/19 Python
Python通用唯一标识符uuid模块使用案例
2020/09/10 Python
CSS3感应鼠标的背景闪烁和图片缩放动画效果
2014/05/14 HTML / CSS
在浏览器端如何得到服务器端响应的XML数据
2012/11/24 面试题
信息技术专业大学生个人的自我评价
2013/10/05 职场文书
2014年助理工程师工作总结
2014/11/14 职场文书
2016年秋季趣味运动会开幕词
2016/03/04 职场文书
小学生一年级(书信作文)
2019/08/13 职场文书
Go 中的空白标识符下划线
2022/03/25 Golang
mysql 索引的数据结构为什么要采用B+树
2022/04/26 MySQL
Golang实现可重入锁的示例代码
2022/05/25 Golang