Node.JS、Socket.IO 和大型 XML 文件：极大的性能损失？

发布于 2024-12-12 07:03:06 字数 330 浏览 0 评论 0原文

前几天我偶然发现了一个丑陋的问题：我使用 XML 字符串在服务器和客户端之间进行通信并交换精确的自定义数据。只要 XML 文件的大小不太大，就可以正常工作。

但在一种情况下，我需要传输大约 35000 行的 XML 文件，该文件在客户端会生成大约 2200 行的 HTML 表。在服务器上，我使用 fs.readFile() 方法，然后立即发送它的内容。在客户端调用 socket.on('message') 处理程序之前，需要很长时间（或者准确地说：至少 6 秒）。

我是 Node.js 新手，昨天一整天都在谷歌搜索。有谁知道如何加快读取 XML 文件并在给定环境中传输它的速度吗？

原文

分享到QQ

分享到微博

如果你对这篇内容有疑问，欢迎到本站社区发帖提问参与讨论，获取更多帮助，或者扫码二维码加入 Web 技术交流群。

发布评论

需要登录才能够评论，你可以免费注册一个本站的账号。

挽你眉间 2024-12-19 07:03:06

我得到了 3 个可能提高性能的建议：

使用 JSON 而不是 XML。解析速度要快得多，有时它的大小比 XML 小。您可以使用 node-expat 将 XML 转换为 JSON。请参阅此基准。
在服务器端制作表格。服务器显然比客户端快。然后你也可以使用缓存。
我认为最好使用直接 AJAX 调用，socket.io 很重，我不认为它不是为重对象而设计的。

回复收藏 0 原文

少女七分熟 2024-12-19 07:03:06

我一直在使用 https://github.com/ astro/node-expat/blob/master/lib/node-expat.js 来解析巨大的 37GB XML 文件。它支持文件流并且运行良好。

var expat = require('node-expat');
var fs = require('fs');
var parser = new expat.Parser("UTF-8");
// set up your event listeners here
var fname = "path/to/your/file.xml";
fs.createReadStream(fname).pipe(parser);

设置萨克斯风格的事件监听器非常简单，如果您需要帮助，请告诉我。

I've been using https://github.com/astro/node-expat/blob/master/lib/node-expat.js to parse an enormous 37GB XML file. It supports file streaming and is working great.

var expat = require('node-expat');
var fs = require('fs');
var parser = new expat.Parser("UTF-8");
// set up your event listeners here
var fname = "path/to/your/file.xml";
fs.createReadStream(fname).pipe(parser);

Setting up sax-style event listeners is pretty easy, let me know if you need help with it.

回复收藏 0 原文

~没有更多了~