Node.js中的缓冲与流模块详细介绍


Posted in Javascript onFebruary 11, 2015

缓冲(buffer)模块

js起初就是为浏览器而设计的,所以能很好的处理unicode编码的字符串,但不能很好的处理二进制数据。这是Node.js的一个问题,因为Node.js旨在网络上发送和接收经常是以二进制格式传输的数据。比如:

 - 通过TCP连接发送和接收数据;
 - 从图像或者压缩文件读取二进制数据;
 - 从文件系统读写数据;
 - 处理来自网络的二进制数据流

而Buffer模块为Node.js带来了一种存储原始数据的方法,于是可以再js的上下文中使用二进制数据。每当需要在Node.js中处理I/O操作中移动的数据时,就有可能使用Buffer模块。

类:Buffer

Buffer 类是一个全局变量类型,用来直接处理2进制数据的。 它能够使用多种方式构建。

原始数据保存在 Buffer 类的实例中。一个 Buffer 实例类似于一个整数数组

1.new Buffer(size):分配一个新的 buffer 大小是 size 的8位字节.
2.new Buffer(array):分配一个新的 buffer 使用一个8位字节 array 数组.
3.new Buffer(str, [encoding]):encoding String类型 - 使用什么编码方式,参数可选.

4.类方法: Buffer.isEncoding(encoding):如果给定的编码 encoding 是有效的,返回 true,否则返回 false。
5.类方法: Buffer.isBuffer(obj):测试这个 obj 是否是一个 Buffer. 返回Boolean
6.类方法: Buffer.concat(list, [totalLength]):list {Array}数组类型,Buffer数组,用于被连接。totalLength {Number}类型 上述Buffer数组的所有Buffer的总大小。
除了可以读取文件得到Buffer的实例外,还能够直接构造,例如:

var bin = new Buffer([ 0x48, 0x65, 0x6c, 0x6c, 0x6c ]);

Buffer与字符串类似,除了可以用.length属性得到字节长度外,还可以用[index]方式读取指定位置的字节,例如:

bin[0]; // => 0x48;

Buffer与字符串能够互相转化,例如可以使用指定编码将二进制数据转化为字符串:
var str = bin.toString('utf-8'); // => "hello"

.slice方法不是返回一个新的Buffer,而更像是返回了指向原Buffer中间的某个位置的指针,如下所示。
1.[ 0x48, 0x65, 0x6c, 0x6c, 0x6c ]

2.    ^           ^

3.    |           |

4.   bin     bin.slice(2)

写入缓冲区

var buffer = new Buffer(8);//创建一个分配了8个字节内存的缓冲区

console.log(buffer.write('a','utf8'));//输出1

这会将字符"a"写入缓冲区,node返回经过编码以后写入缓冲区的字节数量,这里的字母a的utf-8编码占用1个字节。

复制缓冲区

Node.js提供了一个将Buffer对象整体内容复制到另一个Buffer对象中的方法。我们只能在已经存在的Buffer对象之间复制,所以必须创建它们。

buffer.copy(bufferToCopyTo)

其中,bufferToCopyTo是要复制的目标Buffer对象。如下示例:

var buffer1 = new Buffer(8);

buffer1.write('nice to meet u','utf8');

var buffer2 = new Buffer(8);

buffer1.copy(buffer2);

console.log(buffer2.toString());//nice to meet u

流模块

在UNIX类型的操作系统中,流是个标准的概念。有如下三个主要的流:

1.标准输入
2.标准输出
3.标准错误

可读流

如果说,缓冲区是Node.js处理原始数据的方式的话,那么流通常是Node.js移动数据的方式。Node.js中的流是可读的或者可写的。Node.js中许多模块都使用了流,包括HTTP和文件系统。

假设我们创建一个classmates.txt的文件,并从中读入姓名清单,以便使用这些数据。由于数据是流,这就意味着完成文件读取之前,从收到最初几个字节开始,就可以对数据动作,这是Node.js中的一个常见模式:

var fs = require('fs');

var stream = fs.ReadStream('classmates.txt');

stream.setEncoding('utf8');

stream.on('data', function (chunk) {

    console.log('read some data')

});

stream.on('close', function () {

    console.log('all the data is read')

});

在以上示例中,在收到新数据时触发事件数据。当文件读取完成后触发关闭事件。

可写流

显然,我们也可以创建可写流以便写数据。这意味着,只要一段简单的脚本,就可以使用流读入文件然后写入另一个文件:

var fs = require('fs');

var readableStream = fs.ReadStream('classmates.txt');

var writableStream = fs.writeStream('names.txt');

readableStream.setEncoding('utf8');

readableStream.on('data', function (chunk) {

    writableStream.write(chunk);

});

readableStream.on('close', function () {

    writableStream.end();

});

现在,当接收到数据事件时,数据会被写入可写流中。

readable.setEncoding(encoding):返回: this

readable.resume():同上。该方法让可读流继续触发 data 事件。

readable.pause():同上。该方法会使一个处于流动模式的流停止触发 data 事件,切换到非流动模式,并让后续可用数据留在内部缓冲区中。
类: stream.Writable

Writable(可写)流接口是对您正在写入数据至一个目标的抽象。

1.writable.write(chunk, [encoding], [callback]):

chunk {String | Buffer} 要写入的数据
encoding {String} 编码,假如 chunk 是一个字符串
callback {Function} 数据块写入后的回调
返回: {Boolean} 如果数据已被全部处理则 true。

该方法向底层系统写入数据,并在数据被处理完毕后调用所给的回调。

2.writable.cork():强行滞留所有写入。

滞留的数据会在 .uncork() 或 .end() 调用时被写入。

3.writable.end([chunk], [encoding], [callback])

chunk {String | Buffer} 可选,要写入的数据
encoding {String} 编码,假如 chunk 是一个字符串
callback {Function} 可选,流结束后的回调
在调用 end() 后调用 write() 会产生错误。

// 写入 'hello, ' 然后以 'world!' 结束

http.createServer(function (req, res) {

  res.write('hello, ');

  res.end('world!');

  // 现在不允许继续写入了

});
Javascript 相关文章推荐
js 绑定键盘鼠标事件示例代码
Feb 12 Javascript
详解JS函数重载
Dec 04 Javascript
Javascript递归打印Document层次关系实例分析
May 15 Javascript
BootStrap响应式导航条实例介绍
May 06 Javascript
JavaScript导航脚本判断当前导航
Jul 12 Javascript
AngularJS实现表单验证功能详解
Oct 12 Javascript
mpvue小程序仿qq左滑置顶删除组件
Aug 03 Javascript
详解微信小程序的不同函数调用的几种方法
May 08 Javascript
解决layui富文本编辑器图片上传无法回显的问题
Sep 18 Javascript
JavaScript享元模式原理与用法实例详解
Mar 09 Javascript
javascript实现贪吃蛇经典游戏
Apr 10 Javascript
微信小程序实现点击导航标签滚动定位到对应位置
Nov 19 Javascript
javascript中var的重要性分析
Feb 11 #Javascript
JavaScript设计模式之工厂模式和构造器模式
Feb 11 #Javascript
js实现可兼容IE、FF、Chrome、Opera及Safari的音乐播放器
Feb 11 #Javascript
45个JavaScript编程注意事项、技巧大全
Feb 11 #Javascript
JS实现判断碰撞的方法
Feb 11 #Javascript
javascript异步编程代码书写规范Promise学习笔记
Feb 11 #Javascript
jquery实现动态操作select选中
Feb 11 #Javascript
You might like
PHP学习笔记 (1) 环境配置与代码调试
2011/06/19 PHP
ThinkPHP采用实现三级循环代码实例
2014/07/18 PHP
Jquery下判断Id是否存在的代码
2011/01/06 Javascript
javascript 常用功能总结
2012/03/18 Javascript
css配合jquery美化 select
2013/11/29 Javascript
iframe窗口高度自适应的实现方法
2014/01/08 Javascript
jQuery与Ajax以及序列化
2016/02/01 Javascript
AngularJS实现在ng-Options加上index的解决方法
2016/11/03 Javascript
从零开始学习Node.js系列教程五:服务器监听方法示例
2017/04/13 Javascript
关于javascript作用域的常见面试题分享
2017/06/18 Javascript
vue2中引用及使用 better-scroll的方法详解
2018/11/15 Javascript
jQuery动态操作表单示例【基于table表格】
2018/12/06 jQuery
JavaScript ES6中的简写语法总结与使用技巧
2018/12/30 Javascript
js实现无缝轮播图插件封装
2020/07/31 Javascript
让你30分钟快速掌握vue3教程
2020/10/26 Javascript
[59:48]DOTA2-DPC中国联赛 正赛 VG vs Magma BO3 第一场 1月26日
2021/03/11 DOTA
python进阶教程之文本文件的读取和写入
2014/08/29 Python
详解Python3 基本数据类型
2019/04/19 Python
python调用接口的4种方式代码实例
2019/11/19 Python
Python 基于wxpy库实现微信添加好友功能(简洁)
2019/11/29 Python
用Python做一个久坐提醒小助手的示例代码
2020/02/10 Python
利用4行Python代码监测每一行程序的运行时间和空间消耗
2020/04/22 Python
获取CSDN文章内容并转换为markdown文本的python
2020/09/06 Python
python 求两个向量的顺时针夹角操作
2021/03/04 Python
html5 canvas-1.canvas介绍(hello canvas)
2013/01/07 HTML / CSS
阿里巴巴美国:Alibaba美国
2019/11/24 全球购物
Marc O’Polo俄罗斯官方在线商店:德国高端时尚品牌
2019/12/26 全球购物
财务经理岗位职责
2013/11/09 职场文书
自荐信的格式
2014/03/10 职场文书
《真想变成大大的荷叶》教学反思
2014/04/14 职场文书
师德先进个人事迹材料
2014/12/19 职场文书
后勤工作个人总结
2015/02/28 职场文书
教师党员自我评价2015
2015/03/04 职场文书
2015年社区精神文明工作总结
2015/05/26 职场文书
Python基础之元类详解
2021/04/29 Python
浅谈sql_@SelectProvider及使用注意说明
2021/08/04 Java/Android