我可以通过Node JS中的发布请求将大于16MB的文本文件上传到MongoDB

Question

我正在建立一个网站，用户将他们的详细信息和工作上传到数据库，但他们的工作是文本、视频和图像的组合。我不知道如何使用 multer 将此类文件立即上传到 mongodb。应该有人帮忙。

我尝试在不使用 multer 的情况下上传它，但是当文档超过 16mb 时，它会显示错误。

Answer 1

单个mongoDB文档的数量不超过16MB。 Multer不是问题所在。

幸运的是，有一个解决方案可以在mongodb中存储大文件： gridfs 。

该文件分解成小于16MB的块，然后存储在单独的集合中。而不是这样：

{
  _id: ...,
  name: "John Smith",
  work: [{
    file: (a very large binary file),
    filename: "foo.mp4"
  }]
}

您要保存这样的东西：

1. Gridfs将在名为的集合中创建一个文档，例如'work.files'

{
  _id: ...,
  filename: "foo.mp4",
  ...
}

2. Gridfs将在一个名为fim的集合中创建多个文档，每个文档小于16mb，例如'work.chunks'

{
  _id: ...,
  files_id: (a reference to a work.files._id),
  n: 1,
  data: ...
}, {
  _id: ...,
  files_id: (the same reference to a work.files._id),
  n: 2,
  data: ...
}

3. 而不是嵌入式文件，您将对条目的参考存储在中work.files。

{
  _id: ...,
  name: "John Smith",
  work: [{
    _id: (a reference to a work.files._id)
  }]
}

您无需自己创建这些集合，也无需自己构成部分零件，因为有库可以帮助您解决此问题，，例如mongoose-gridfs 。大多数库都提供了将两个传输文件传输到GRIDFS集合中的方法，因此它也可以非常具有性能。

对于非常小的文件（例如头像），将它们嵌入在文档中可能仍然有利。

---

附带说明：关于Gridfs的“特殊”并不是很多“特殊” - 您不是需要安装的扩展名，而是许多人遵循的互操作性。这些文档存储在标准的普通MongoDB集合中。 As such you can store any metadata/ custom fields (example在（whyt）中，从前面提到的库中）.files（如果需要）。取决于要存储的文件的大小。如果要流式传输它们（例如，视频），则可能需要调整块尺寸（默认255kb） - 每文件。