CasperJS/PhantomJS 比 Curl 慢得多

Question

当我尝试curl www.yelp.com 时，需要 1.1 秒。但是使用 CasperJS 检索页面需要一分钟！

这正常吗？我如何找出使 casper/phantom 变慢的原因？我怀疑 casper 没有遵循一些 HTTP 重定向？

var casper = require('casper').create();
var url = 'http://www.yelp.com';

casper.start(url);
casper.then(function() {
    console.log(  this.getHTML() );
    this.exit();
});

casper.run();

Answer 1

你在 Windows 上吗？如果是，则在使用自动代理时存在神秘的网络问题。有关详细信息，请参阅发行说明：http://phantomjs.org/release-1.9.html。

一般来说，尝试分析网络请求和响应。跟踪网络流量的一种非常简单的方法：

page.onResourceRequested = function (request) {
  console.log('Request ' + JSON.stringify(request, undefined, 4));
};
page.onResourceReceived = function (response) {
  console.log('Receive ' + JSON.stringify(response, undefined, 4));
};

如果您需要时间等，您需要进一步调整它。阅读有关此Network Monitoring 功能的文档。