【发布时间】:2014-07-08 11:45:51
【问题描述】:
我正在构建一个 nodejs 网络爬虫,但遇到了一些字符集问题。不同的网站有不同的字符集,如 UTF-8、windows-1252、iso-8859-1 等。
如何调整我的请求以将所有不同于 UTF-8 的字符集转换为 UTF-8?因为如果我什么都不做,只是简单地使用cheerio 来解析内容,我会得到像“ib�rica”这样的奇怪符号,其中“�”应该是“é”
【问题讨论】:
标签: node.js character-encoding http-headers request