提取完整的 Html 源，而不是部分

Question

我正在尝试从以下站点 http://bit.ly/16jFeyA 中提取图像和一些文本

Web 窗体、C#、Visual Studio、HtmlAgilityPack

Encoding 适用于 WebClient Only ，浏览器 wb.Document.Encoding = "GB2312"; 不起作用，不重要。

该网站对图像使用延迟加载。 WebBrowser 正确加载，带有信息的图像，但是当我使用 Web 客户端 / wb.DocumentText 提取时，它不会下载“完整信息”，某些信息丢失，尤其是图像链接等。

这有什么问题吗？我正在尝试提取图像和产品信息。

向下滚动以强制加载图像后使用 wb.DocumentText 提取（由于延迟加载）-http://notepad.cc/share/EjW3tFCffO

wb = 网络浏览器

提前致谢！

Answer 1

您需要使用知道如何评估和执行客户端 JavaScript 的工具，例如无头浏览器。 PhantomJS 应该足够了。