如何知道 HTTP 服务器何时完成发送数据

Question

我正在开发一个面向浏览器/代理的项目，我需要下载网页。向 Web 服务器发送自定义 HTTP 请求后，我开始监听服务器响应。

读取响应时，我检查响应标头中的 Content-Length:-row。如果我得到其中之一，很容易确定服务器何时完成发送数据，因为我总是知道我收到了多少字节的数据。

当服务器不包含 Content-Length 标头并且还保持连接打开以接受进一步请求时，就会出现此问题。例如，谷歌服务器响应 gzipped-content，但不包括内容长度。我如何知道何时停止等待更多数据并关闭连接？

我曾考虑过在一段时间内没有收到数据时使用超时值来关闭连接，但这似乎是错误的方法。例如，Chrome 可以下载与我相同的页面，并且似乎总是确切地知道何时关闭连接。

Answer 1

查看 IETF RfC 2616，搜索分块编码和 Content-Range。

HTTP 旨在返回未知长度的内容，如：

HTTP/1.1 200 OK
Content-Type: text/plain
Transfer-Encoding: chunked

25
This is the data in the first chunk

1C
and this is the second one

3
con
8
sequence
0

源维基百科

Answer 2

我会尝试建议您强制 Connection: close 标头，以便确保服务器在输出完成后关闭连接，无论是否设置了 Content-length或不。性能将受到部分影响

Answer 3

您可能会遇到两种情况：
1. 套接字关闭
2.socket-timeout

通常socket会被关闭，声明一个Socket Timeout也是有意义的。

请记住

 int stream.read(byte[],size);

返回直到套接字关闭或套接字超时（或达到大小参数）为止已读取的字节[]参数大小的实际大小。

问候。