从网络服务器递归列出文件

Question

我目前尝试实现一个简单的网络下载器，它在唯一的目录中递归下载文件。

我要列出服务器上的文件： Updater.cs：

    public static List<string> remote_filecheck()
    {
        List<string> rfiles = new List<string>();
        string url = "http://********/patchlist.txt";
        WebClient client = new WebClient();
        client.DownloadFile(url, @"patchlist.txt");

        string line;
        StreamReader reader = new StreamReader("patchlist.txt");

        while ((line = reader.ReadLine()) != null)
        {
            rfiles.Add(line);
        }
        reader.Close();
        return rfiles;
    }

我目前使用补丁列表，其中包含指向我的 http 文件的所有直接链接。

我尝试了网络上几乎所有有关递归下载的片段，例如 RegEx、WebRequests 等。

现在我想知道你是否有一个好方法来递归通过我的 HTTP 服务器并列出所有文件名，这就是我想知道的。

当我有文件名的 List 时，我就可以完成剩下的事情了。

Answer 1

您尝试从中获取文件并建立索引的服务器是否已打开？

如果是这样，那么可能需要抓取返回的页面，然后逐一访问每个网址。

如果没有，那么我不确定这是否可以很容易地完成。

好的，根据下面的评论，我认为您会想要执行以下操作：

        string indexUrl = "http://www.stackoverflow.com";

        WebBrowser browser = new WebBrowser();
        browser.Navigate(indexUrl);

        do
        {
            Application.DoEvents();
        } while (browser.ReadyState != WebBrowserReadyState.Complete);



        var listOfFilePaths = new List<string>();


        foreach (HtmlElement linkElement in browser.Document.GetElementsByTagName("a"))
        {
            var pagePath = linkElement.GetAttribute("href");
            listOfFilePaths.Add(pagePath);
        }

请注意，WebBrowser 控件需要在 Windows 窗体应用程序中运行才能使其工作（轻松）。我使用的indexPath变量应该更改为服务器索引页的路径（我只是以stackoverflow为例）。

foreach 循环从站点中提取所有锚点 (a) 标记，获取它们指向的路径，并将它们添加到 listOfFilePaths 集合中。

一旦此代码执行完毕，listOfFilePaths 集合将包含索引页上每个链接的条目，从而包含指向服务器上每个文件的链接。

从这里开始，需要循环 listOfFilePaths 集合并逐个下载每个文件。也许甚至使用一些规则不下载您不感兴趣的某些类型的文件。我相信根据您所说的，您应该能够做到这一点。

希望这有帮助。