【发布时间】:2016-10-25 17:02:53
【问题描述】:
我在节点(节点模块)中使用 PhantomJS 制作了一个刮板。
我正在尝试从页面 (url) 上的表格中获取数据。 当页面加载时,它只显示表的 25 条记录。底部有一个“选择”,您可以将其更改为“全部”以查看所有记录。如何在返回 HTML 之前将 select 的值更改为“All”?
var phantom = require('phantom');
phantom.create().then(function(ph){
ph.createPage().then(function(page){
page.open(url).then(function(status){
console.log(status);
page.property('content').then(function(content){
console.log(content);
page.close();
ph.exit();
});
});
});
});
<select name="qs-rankings_length" aria-controls="qs-rankings" class="jcf-hidden">
<option value="100">100</option>
<option value="200">200</option>
<option value="-1">All</option>
</select>
【问题讨论】:
标签: javascript node.js web-scraping phantomjs web-crawler