加速 Node.js 数组操作

Question

我需要将一个巨大的文件转换为以下格式：对于每个字节，将该字节打印为字符并在括号中打印其十进制值，以便“@”变为“@[64]”。我得到以下信息：

var s = fs.createReadStream(path,  { encoding: 'binary' });  
var p = [];

s.addListener('data', function(data) {     
    for(var i = 0; i < data.length; i++) {
            p.push(data.charAt(i)  + "[" + data.charCodeAt(i) + "]");
    }
});

s.addListener('end', function(data) {     
    console.log(p.join(""));
});

然而，这种工作速度非常慢。有什么想法可以优化吗？

更新。根据评论，添加了一些日期语句，发现“p.push”行占用了大部分时间。所以我猜问题不在于文件读取。尽管如此，问题仍然存在——如何加快速度。

Answer 1

如果文件是 utf-8，您可能需要先对其进行解码。另外，不要使用二进制编码，它现在基本上已被弃用。

举个例子：

var fs = require('fs')
  , StringDecoder = require('string_decoder').StringDecoder;

var stream = fs.createReadStream('/path/to/my/file')
  , decode = new StringDecoder('utf8')
  , out = [];

stream.on('data', function(buff) {
  buff = decode.write(buff);
  for (var i = 0, l = buff.length; i < l; i++) {
    out.push(buff[i] + ' [' + buff.charCodeAt(i) + ']');
  }
});

stream.on('end', function() {
  console.log(out.join('\n'));
});

为了更简单，你也可以使用读流内置的解码功能：stream.setEncoding('utf-8');而不用自己制作StringDecoder，但是它在某些情况下，使用您自己的缓冲区可能很有用，例如您仍然可以直接访问缓冲区。

编辑：抱歉，没有看到您要求优化。你所做的事情本质上很慢。我以为你只是想用它来调试目的。可能有一种更好的方法来完成您最初想做的事情。但是，由于您无论如何都会缓冲所有内容，因此您不妨执行 fs.readFile 并遍历缓冲区。