如何通过 Html Agility Pack 从网页中提取链接、文本和时间戳

Question

我正在使用 Html Agility Pack，并尝试从以下 html 代码中提取链接和链接文本。该网页是从远程页面获取并整体保存在本地的。然后，我尝试从这个本地网页提取链接和链接文本。该网页在其页面内自然有其他 html 代码，如其他链接文本等，但为了清楚起见，此处将其删除。

<span class="Subject2"><a href="/some/today.nsf/0/EC8A39D274864X5BC125798B0029E305?open">
Description 1 text here</span> <span class="time">2012-01-20 08:35</span></a><br>
<span class="Subject2"><a href="/some/today.nsf/0/EC8A39XXXX264X5BC125798B0029E312?open">
Description 2 text here</span> <span class="time">2012-01-20 09:35</span></a><br>

但在尝试提取链接和链接文本时，以上内容是最独特的内容。

这就是我希望看到的结果

<link>/some/today.nsf/0/EC8A39D274864X5BC125798B0029E305</link>
<title>Description 1 text here</title>
<pubDate>Wed, 20 Jan 2012 07:35:00 +0100</pubDate>

<link>/some/today.nsf/0/ EC8A39XXXX264X5BC125798B0029E312</link>
<title>Description 2 text here</title>
<pubDate> Wed, 20 Jan 2012 08:35:00 +0100</pubDate>

这是我到目前为止的代码：

var linksOnPage = from lnks in document.DocumentNode.SelectNodes("//span[starts-with(@class, 'Subject2')]")

(lnks.Name == "a" &&
lnks.Attributes["href"] != null &&
lnks.InnerText.Trim().Length > 0)

select new
{
Url = lnks.Attributes["href"].Value,
Text = lnks.InnerText
Time = lnks. Attributes["time"].Value
};

    foreach (var link in linksOnPage)
        {
            // Loop through.
            Response.Write("<link>" + link.Url + "</link>");
      Response.Write("<title>" + link.Text + "</title>");
      Response.Write("<pubDate>" + link.Time + "</pubDate>");
        }

它不起作用，我什么也没得到。

因此，任何建议和帮助将不胜感激。

提前致谢。

更新：我现在已经设法使语法正确，以便从上面的示例中选择链接：使用以下代码：

var linksOnPage = from lnks in document.DocumentNode.SelectNodes("//span[@class='Subject2']//a")

这可以很好地选择带有网址和文本的链接，但是我该怎么办还要获取时间戳吗？

也就是说，从中选择

<span class="time">2012-01-20 09:35</span></a>

每个链接后面的时间戳。根据上面的内容，输出循环内的每个链接都有该输出吗？感谢您对此的任何帮助。

Answer 1

您的 HTML 示例格式错误，这就是您得到意外结果的原因。

要找到第一个和第二个值，您必须在 中获取 - 第一个值是 a href 属性值，第二个是锚点的InnerText。要获取第三个值，您必须获取 标记的以下同级标记并获取其 InnerText。

看，你可以这样做：

var nodes = document.DocumentNode.SelectNodes("//span[@class='Subject2']//a");
foreach (var node in nodes)
{
    if (node.Attributes["href"] != null)
    {
        var link = new XElement("link", node.Attributes["href"].Value);
        var description = new XElement("description", node.InnerText);
        var timeNode = node.SelectSingleNode(
                         "..//following-sibling::span[@class='time']");
        if (timeNode != null)
        {
            var time = new XElement("pubDate", timeNode.InnerText);
            Response.Write(link);
            Response.Write(description);
            Response.Write(time);
        }
    }
}

输出如下：

<link>/some/today.nsf/0/EC8A39D274864X5BC125798B0029E305?open</link>
<description>Description 1 text here</description>
<pubDate>2012-01-20 08:35</pubDate>
<link>/some/today.nsf/0/EC8A39XXXX264X5BC125798B0029E312?open</link>
<description>Description 2 text here</description>
<pubDate>2012-01-20 09:35</pubDate>