我已将整个网页的 html 保存为字符串，现在我想从链接中获取“href”值，最好能够稍后将它们保存为不同的字符串。最好的方法是什么？
我尝试将字符串另存为 .xml 文档并使用 XPathDocument 导航器对其进行解析，但是（令人惊讶的是）它不能很好地导航非真正的 xml 文档。
正则表达式是实现我想要实现的目标的最佳方法吗？
【问题讨论】：
标签： c# html xml html-content-extraction
我可以推荐HTML Agility Pack。我曾在一些需要解析 HTML 的情况下使用它，而且效果很好。将 HTML 加载到其中后，您可以使用 XPath 表达式来查询文档并获取锚标记（以及其中的任何其他内容）。
HtmlDocument yourDoc = // load your HTML;
int someCount = yourDoc.DocumentNode.SelectNodes("your_xpath").Count;
【讨论】：
正则表达式是一种方法，但它可能会出现问题。
大多数 HTML 页面无法使用标准 html 技术进行解析，因为正如您所发现的，大多数页面不进行验证。
您可以花时间尝试集成 HTML Tidy 或类似工具，但只构建您需要的正则表达式会快得多。
更新
在本次更新时，我收到了 15 票赞成票和 9 票反对票。我认为也许人们没有阅读这个问题的问题，也没有阅读这个答案的 cmets。 OP 想要做的就是获取 href 值。 就是这样。从这个角度来看，一个简单的正则表达式就可以了。如果作者想解析其他项目，那么我不会像开头所说的那样推荐正则表达式，充其量是有问题的。
【讨论】：
为了处理各种形状和大小的 HTML，我更喜欢使用 HTMLAgility 包@http://www.codeplex.com/htmlagilitypack，它允许您针对所需节点编写 XPath，并在集合中获取这些返回。
【讨论】：
您可能想要 Majestic 解析器之类的东西：http://www.majestic12.co.uk/projects/html_parser.php
还有一些其他选项可以处理易碎的 html。正如其他人所提到的，Html Agility Pack 值得一看。
我不认为正则表达式是 HTML 的理想解决方案，因为 HTML 不是上下文无关的。如果不精确，它们可能会产生足够的结果；甚至确定性地识别 URI 也是一个麻烦的问题。
【讨论】：
如果可能的话，最好不要重新发现轮子。有一些很好的工具可以将 HTML 转换为格式良好的 XML，或者充当 XmlReader：
这里有三个很好的工具：
TagSoup是一个开源程序，是一个基于Java和SAX的工具，由John Cowan开发。这是
一个用 Java 编写的符合 SAX 的解析器，它不是解析格式良好或有效的 XML，而是解析在野外发现的 HTML：糟糕、肮脏和野蛮，尽管通常很不短。 TagSoup 是为那些必须使用某种看似合理的应用程序设计来处理这些东西的人设计的。通过提供 SAX 接口，它允许将标准 XML 工具应用于甚至最糟糕的 HTML。 TagSoup 还包括一个命令行处理器，它读取 HTML 文件并可以生成干净的 HTML 或格式良好的 XML，它与 XHTML 非常接近。
Taggle 是 TagSoup 的商业 C++ 端口。
SgmlReader是微软Chris Lovett开发的工具。
SgmlReader 是任何 SGML 文档（包括对 HTML 的内置支持）的 XmlReader API。还提供了一个命令行实用程序，用于输出格式正确的 XML 结果。
下载包含独立可执行文件和完整源代码的 zip 文件：SgmlReader.zip
阅读它的代码对我们每个人来说都是一个很好的学习练习。
来自描述：
"d:htmlparse(字符串)
d:htmlparse(string,namespace,html-mode)
单参数形式等价于)
d:htmlparse(string,'http://ww.w3.org/1999/xhtml',true()))
使用一些内置的启发式方法将字符串解析为 HTML 和/或 XML）
控制元素的隐含打开和关闭。
它没有完整的 HTML DTD 知识，但有完整的
列表
空元素和实体定义的完整列表。 HTML 实体，以及
十进制和十六进制字符引用都被接受。注意 html-entities
即使 html-mode=false() 也会被识别。
元素名称是小写的（如果 html-mode 为 true()）并放入
命名空间参数指定的命名空间（可能是“”来表示
没有命名空间，除非输入有明确的命名空间声明，在
在这种情况下，这些将受到尊重。
如果 html-mode=true()"
阅读更详细的描述here。
希望这会有所帮助。
干杯，
迪米特·诺瓦切夫。
【讨论】：
我同意 Chris Lively 的观点，因为 HTML 通常不是很好的格式，您最好使用正则表达式。
href=[\"\'](http:\/\/|\.\/|\/)?\w+(\.\w+)*(\/\w+(\.\w+)?)*(\/|\?\w*=\w*(&\w*=\w*)*)?[\"\']
来自 RegExLib 上的 here 应该可以帮助您入门
【讨论】：
如果您知道或可以将文档修复为至少格式正确，那么您可能会更幸运地使用 xml。如果你有 good html（或者更确切地说是 xhtml），.Net 中的 xml 系统应该能够处理它。不幸的是，好的 html 非常罕见。
另一方面，正则表达式在解析 html 时真的很糟糕。幸运的是，您不需要处理完整的 html 规范。您需要担心的是解析 href= 字符串以获取 url。即使这可能很棘手，所以我不会马上尝试。相反，我将首先提出一些问题，以尝试建立一些基本规则。它们基本上都归结为“您对文档了解多少？”，但这里是：
href= 也可以在文档中，但不属于锚标记）？【讨论】：
我在这里链接了一些代码，可以让您使用“LINQ to HTML”...
【讨论】：