javascript转换后如何获取html源代码？

Question

对于学校的一个项目，我正在尝试制作一个网站，该网站可以以比现在更漂亮的方式显示您的成绩。 我已经能够使用 cURL 登录到该站点，现在我想以字符串形式获取成绩，以便可以使用 PHP 对其进行编辑。 唯一的问题是，当 cURL 没有被获取成绩的 javascript 编辑时，它会获取 html 源代码。

所以基本上我想要你在字符串中打开 firebug 或检查器时得到的代码，以便我可以用 php 编辑它。

有没有人知道如何做到这一点？我看过一些帖子说你必须等到页面加载完毕，但我不知道如何让我的网站等待另一个第三方网站加载。

我正在等待执行并且我想要结果的代码是这样的：

<script type="text/javascript">
    var widgetWrapper = $("#objectWrapper325");
    if (widgetWrapper[0].timer !== undefined) {
        clearTimeout( jQuery('#objectWrapper325')[0].timer );
    }
    widgetWrapper[0].timer = setTimeout( function() {
        if (widgetWrapper[0].xhr !== undefined) {
            widgetWrapper[0].xhr.abort();
        }
        widgetWrapper[0].xhr = jQuery.ajax({
            type: 'GET',
            url: "",
            data: {
                "wis_ajax": 1,
                "ajax_object": 325,
                'llnr': '105629'
            },
            success: function(d) {
                var goodWidth = widgetWrapper.width();
                widgetWrapper.html(d);
                /* update width, needed for bug with standard template */
                $("#objectWrapper325 .result__overview").css('width',goodWidth-$("#objectWrapper325         .result__subjectlabels").width());
            }
        });
    }, 500+(Math.random()*1000));
</script>

Answer 1

首先，您必须了解使用 cURL 获取网页与使用浏览器访问同一页面之间的细微但非常重要的区别。

1。使用浏览器加载页面

当您在地址栏输入地址时，浏览器会将 url 转换为 ip 地址。然后它会尝试使用该地址访问 Web 服务器 以请求网页。从现在开始，浏览器将只与网络服务器对话 HTTP。 HTTP 是一种用于通过网络传输文档的协议。浏览器实际上是从 Web 服务器请求一个 html 文档（一堆文本）。 Web 服务器通过将网页发送到浏览器来回答。如果网页是静态页面，则 Web 服务器只是选择一个 html 文件并通过网络发送它。如果它是一个动态页面，Web 服务器会使用一些高级代码（如 php）生成网页，然后将其发送过来。

下载网页后，浏览器将解析该网页并解释其中的 html，从而在浏览器上生成实际网页。在解析过程中，当浏览器找到script 标签时，它会将其内容解释为javascript，这是一种在浏览器中用于操纵网页外观并在浏览器内部进行操作的语言。

记住，网络服务器只发送了一个包含 html 内容的网页，他不知道什么是 javascript。

因此，当您在浏览器上加载网页时，javascript 仅在下载到浏览器后才会被解释。

2。什么是卷曲

如果您查看 curl 手册页，您将了解到 curl 是一种从服务器传输数据/向服务器传输数据的工具，它可以使用一些支持的协议，而 HTTP 就是其中之一。 当您使用 curl 下载页面时，它会尝试以与浏览器相同的方式下载该页面，但不会解析或解释任何内容。 cURL 不理解 javascript 或 html，它所知道的只是如何与 Web 服务器对话。

3。解决方案

因此，在您的情况下，您需要像 cURL 那样下载页面，并以某种方式使 javascript 被解释为就好像它在浏览器中一样。

如果你跟着我到这里，那么你准备好看看CasperJS。