尽管设置了分块流模式，但 HttpURLConnection 缓冲而不是流？

Question

我正在使用 HttpURLConnection 向服务器写入文件，其中一些文件非常大。

final HttpURLConnection conn = (HttpURLConnection) url.openConnection();

不久前，我在写入 1 GB 或更大的对象时遇到了问题。我通过将其设置为流式传输更易于管理的块大小来修复此问题。

final int bufferSize = 1024 * 1024;
[...]
conn.setChunkedStreamingMode(bufferSize);

然后它在我的笔记本电脑上运行良好，但在其他机器上却崩溃了。经过调查，我发现原因是写入输出流时发生内存不足错误。

final OutputStream out = conn.getOutputStream();
final long bytesWritten = IOUtils.copyLarge(in, out);

在 copyLarge 例程中，我发现它能够执行 4096 字节的 262145 次迭代，但在尝试跨越 1 GB 线时失败。为 java 应用程序分配更多内存似乎可以防止这些崩溃，但我认为这应该是不必要的。如果它正在写入 1 MB 的块，那么它要么会因迭代次数少得多而失败，要么重复写入 1 MB 而不会出现问题。

更新：事实证明，设置 ChunkedStreamingMode 的行实际上并未在某些机器上被调用。如果您没有设置固定/分块流模式，HttpURLConnection 只会将所有内容发送到 PosterOutputStream/ByteArrayOutputStream。