【问题标题】:CasperJS continuous runCasperJS 连续运行
【发布时间】:2017-06-09 08:41:41
【问题描述】:

我有一个简单的 CasperJs 脚本,看起来像这样:

var casper = require('casper').create();

casper.start('http://casperjs.org/', function() {
    this.echo(this.getTitle());
});

casper.thenOpen('http://phantomjs.org', function() {
    this.echo(this.getTitle());
});

casper.run();

现在,我希望这个脚本循环执行,直到我停止它,因此我尝试了:

var casper = require('casper').create();

setInterval(function() {
   casper.start('http://casperjs.org/', function() {
    this.echo(this.getTitle());
});

casper.thenOpen('http://phantomjs.org', function() {
    this.echo(this.getTitle());
});

casper.run();}, 5000);

但问题是,casper.run() 也退出了文件执行,没有创建新的 casper 实例。我的问题的一个丑陋的解决方法是创建一个循环执行我的命令的 bash 脚本。我的问题是:如何在终端 casperjs myscript.js 中执行命令,它将连续运行我的抓取脚本,休眠 x 秒,直到我停止它?

【问题讨论】:

    标签: javascript node.js web-scraping phantomjs casperjs


    【解决方案1】:

    没有时间测试以下内容,但我之前做过类似的事情:

    casper.start();
    openPages();
    
    function openPages() {
        casper.thenOpen('http://casperjs.org', function() {
            this.echo('First Page: ' + this.getTitle());
        });
    
        casper.thenOpen('http://phantomjs.org', function() {
            this.echo('Second Page: ' + this.getTitle());
        });
    
        openPages();
    }
    

    编辑:

    如果您想在下一次抓取前等待几秒钟,请使用 casper.wait()

    casper.wait(5000, function() {
        openPages();
    });
    

    【讨论】:

      猜你喜欢
      • 1970-01-01
      • 2013-11-15
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2011-10-06
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      相关资源
      最近更新 更多