从HTTP请求中提取内容，然后从中获取选定的内容

Question

只是出于学习目的，我正在玩页面请求和响应。我需要知道如何实现这一点。我想要做的是从 Windows 应用程序发出 HTTP 请求并从中提取一些内容。例如，

我正在调用 http://stackoverflow.com/questions 现在，我想从响应中提取

中的所有问题节点并对其进行格式化，然后将其显示在表中。有人可以指导我如何做到这一点吗？我在这里也可以从正则表达式中格式化和提取东西，但我不知道如何做。

提前致谢 卢拉

Answer 1

我建议使用 HTML Agility Pack - 它将允许您直接获取页面并使用 XPath 查询它，类似XmlDocument 的工作原理。

Answer 2

您可以使用 HttpWebRequest 获取页面的源内容，如下所示。

string url = @"http://stackoverflow.com/users";

        System.Net.WebRequest request = System.Net.HttpWebRequest.Create(url);

        System.Net.HttpWebResponse  response = (System.Net.HttpWebResponse)request.GetResponse();
        System.IO.StreamReader stream = new System.IO.StreamReader
                (response.GetResponseStream(), System.Text.Encoding.GetEncoding("utf-8"));

         XmlDocument rssDoc = new XmlDocument();
         rssDoc.Load(stream);