大文件上传到 WSS v3

Question

我构建了一个 WSSv3 应用程序，可以以小块的形式上传文件；当每个数据块到达时，出于性能原因**，我会暂时将其保留到 SQL 2005 图像数据类型字段中。

上传结束时出现问题；我需要通过 WSSv3 对象模型将数据从 SQL Server 移动到 Sharepoint 文档库。

现在，我可以想到两种方法：

SPFileCollection.Add(string, (byte[])reader[0]); // OutOfMemoryException

还有

SPFile file = folder.Files.Add("filename", new byte[]{ });
using(Stream stream = file.OpenBinaryStream())
{
    // ... init vars and stuff ...
    while ((bytes = reader.GetBytes(0, offset, buffer, 0, BUFFER_SIZE)) > 0)
    {
        stream.Write(buffer, 0, (int)bytes); // Timeout issues
    }
    file.SaveBinary(stream);
}

其他方法可以成功完成这项任务吗？

** 性能原因：如果您尝试直接在 Sharepoint 写入每个块，您会注意到随着文件增大（>100Mb），性能会下降。

Answer 1

我以以下代码结束：

myFolder.Files.Add("filename", 
   new DataRecordStream(dataReader, 
      dataReader.GetOrdinal("Content"), length));

您可以找到 此处实现 DataRecordStream。它基本上是一个通过 .GetBytes 从 DbDataRecord 读取数据的 Stream。

这种方法类似于 OpenBinaryStream()/SaveBinary(stream)，但它是当您传输数据时，不会将所有 byte[] 保留在内存中。在某些时候，将使用 64k 块从 Microsoft.SharePoint.SPFile.CloneStreamToSPFileStream 访问 DataRecordStream。

谢谢大家提供的宝贵信息！

Answer 2

我要说的第一件事是 SharePoint确实不是为此而设计的。它将所有文件存储在自己的数据库中，因此这就是这些大文件的存放位置。由于多种原因，这不是一个好主意：可扩展性、成本、备份/恢复、性能等......因此我强烈建议使用文件共享。

您可以通过更改 httpRuntime 元素的executionTimeout 属性来增加 Web 请求的超时时间在 web.config 中。

除此之外，我不确定还有什么建议。我还没有听说过 SharePoint 中存储有这么大的文件。如果您绝对必须这样做，请尝试询问服务器故障。

Answer 3

如前所述，在 Sharepoint 中存储大文件通常不是一个好主意。有关详细信息，请参阅本文：http://blogs.msdn.com/joelo/archive/2007/11/08/what-not-to-store-in-sharepoint.aspx

话虽如此，这是可能的 使用 BLOB 的外部存储，这可能会或可能不会帮助您解决性能问题 - Microsoft 发布了一个半完整的外部 BLOB 存储提供程序，可以解决这个问题，但不幸的是，它在场级别工作并影响所有上传。恶心。

幸运的是，由于您可以实现自己的外部 BLOB 提供程序，因此您可以编写一些内容来更好地处理这些特定文件。有关详细信息，请参阅此文章： http://207.46.16.252/en-us/ magazine/2009.06.insidesharepoint.aspx

这是否值得花费这些开销取决于您遇到的问题的严重程度。 :)