对 URL 的内容进行压缩 - Java

Question

正如标题所示，我试图从 HTTP 请求中获取并压缩一个字符串。

urlConn = url.openConnection();
int len = CONTENT_LENGTH
byte[] gbytes = new byte[len];
gbuffer = new GZIPInputStream(urlConn.getInputStream(), len);
System.out.println(gbuffer.read(gbytes)+"/"+len);
System.out.println(gbytes);
result = new String(gbytes, "UTF-8");
gbuffer.close();
System.out.println(result);

对于某些 URL，它工作得很好。我得到这样的输出：

42/42
[B@96e8209
The entire 42 bytes of my data. Abcdefghij.

对于其他人，它给了我类似以下输出的内容：

22/77
[B@1d94882
The entire 77 bytes of

如您所见，数据的前一些奇数字节即使不相同，也非常相似，因此它们不应该导致这些问题。我真的似乎无法确定它。增加 CONTENT_LENGTH 并没有帮助，而且无论数据流大小比给我带来问题的数据流大还是小，都可以正常工作。

编辑：问题也不在于原始 gzip 压缩数据，因为 Cocoa 和 Python 都可以毫无问题地对其进行压缩。

编辑：已解决。包括最终代码：

urlConn = url.openConnection();
int offset = 0, len = CONTENT_LENGTH
byte[] gbytes = new byte[len];
gbuffer = new GZIPInputStream(urlConn.getInputStream(), len);
while(offset < len)
{
    offset += gbuffer.read(gbytes, offset, offset-len);
}
result = new String(gbytes, "UTF-8");
gbuffer.close();

Answer 1

数据可能在流中不可用。第一个 println() 表示您只读取了 22 个字节，因此当您调用 read() 时只有 22 个字节可用。您可以尝试循环，直到读完 CONTENT_LENGTH 字节。也许是这样的：

int index = 0;
int bytesRead = gbuffer.read(gbytes);
while(bytesRead>0 && index<len) {
    index += bytesRead;
    bytesRead = gbuffer.read(gbytes,index,len-index);
}

Answer 2

GZIPInputStream.read() 不保证在一次调用中读取所有数据。你应该使用循环：

byte[] buf = new byte[1024];
int len = 0, total = 0;
while ((len = gbuffer.read(buf)) > 0) {
    total += len;
    // do something with data
}