节点无法抓取某些页面

Question

我不知道这是与coldfusion页面有关还是什么，但我无法抓取这些.cfm页面

在带有request的目录的命令行中运行：

node> var request = require('request');
node> var url = 'http://linguistlist.org/callconf/browse-conf-action.cfm?confid=173395';
node> request(url, function (err, res, body) { if (err) { console.log(err) } else { console.log('body:', body) }; });

我尝试过使用其他一些 .cfm 网站，但它们可以正常工作，而且只得到空白结果，所以我不知道它可能是什么

注意：我也尝试过使用准系统 require('http').get(url,…) 路由，但得到相同的空白结果

Answer 1

我明白了！ （最后）

这个网络服务器真的需要知道如何回答你。 试试这个（它对我有用）

var request = require('request');
var options = {
  url: 'http://linguistlist.org/callconf/browse-conf-action.cfm?confid=173395',
  headers: {
   'Accept-Encoding':'none'
  }
};
request(options, function (err, res, body) { if (err) { console.log(err) } else { console.log('body:', body) }; });