通过 http 跟踪日志文件

Question

出于安全原因（我是开发人员），我无法通过命令行访问写入日志文件的生产服务器。不过，我可以通过 HTTP 访问这些日志文件。是否有一个“tail -f”方式的实用程序可以仅使用 HTTP“跟踪”纯文本文件？

Answer 1

如果 HTTP 服务器接受返回部分资源的请求，则可以执行此操作。例如，如果 HTTP 请求包含标头：

范围：字节=-500

响应将包含资源的最后 500 个字节。您可以获取它，然后将其解析为行等。我不知道有任何现成的客户端可以为您执行此操作 - 我会编写一个脚本来完成这项工作。

您可以使用 Hurl 来试验标头（来自公开可用的资源）。

Answer 2

我出于同样的目的编写了一个 bash 脚本。您可以在这里找到它 https://github.com/maksim07/url-tail

Answer 3

您可以使用 PsExec 在远程计算机上执行命令。
Windows 的 tail 命令可以在 http://tailforwin32.sourceforge.net/ 找到

。如果是 HTTP，您可以编写一个轻量级 Web 服务来轻松实现这一点。
例如，读取指定文件中从第 0 行到第 200 行的文本。

Answer 4

您可以使用小型 java 实用程序通过 Apche HTTP 库通过 Http 读取日志文件。

HttpClient client = HttpClientBuilder.create().build();
    HttpGet request = new HttpGet(uri);
    HttpResponse response = client.execute(request);
    BufferedReader rd = new BufferedReader(new InputStreamReader(
            response.getEntity().getContent()));
    String s = "";
    while ((s = rd.readLine()) != null) {
       //Process the line
    }

Answer 5

我编写了一个简单的 bash 脚本，每 2 秒获取一次 URL 内容，并与本地文件 output.txt 进行比较，然后将差异附加到

我想要在 Jenkins 管道中流式传输 AWS amplify 日志的

while true; do comm -13 --output-delimiter="" <(cat output.txt) <(curl -s "$URL") >> output.txt; sleep 2; done

同一 文件中忘记创建空文件 output.txt 文件首先

: > output.txt

查看流：

tail -f output.txt

更新：

我在这里使用 wget 找到了更好的解决方案：

while true; do wget -ca -o /dev/null -O output.txt "$URL"; sleep 2; done

https://superuser.com/a/514078/603774

Answer 6

我创建了一个 powershell 脚本，它

1. 每 30 秒从给定的 url 获取内容，
2. 使用“Range”HTTP 请求标头仅获取特定数量的数据。

while ($true) {
    $request = [System.Net.WebRequest]::Create("https://raw.githubusercontent.com/fascynacja/blog-demos/master/gwt-marquee/pom.xml")
    $request.AddRange(-2000)
    $response = $request.GetResponse()
    $stream = $response.GetResponseStream()
    $reader = New-Object System.IO.StreamReader($stream)
    $content = $reader.ReadToEnd()
    $reader.Close()
    $stream.Close()
    $response.Close()
 
    Write-Output $content
    
    Start-Sleep -Seconds 30
}

您可以根据自己的需要调整范围和秒数。另外，如果需要，您可以轻松地为特定搜索词添加颜色模式。您还可以将输出重定向到文件。