我想创建一个网络应用程序来组织和分析来自另一个网站的信息。另一个网站没有 API，所以我只想从中获取所有 HTML（在允许其脚本运行之后），并让我可以使用 jquery 为我的 web 应用程序进行分离。
我意识到 PHP 或其他服务器端语言是这个问题的真正答案，但我只知道前端的东西，只想做一些快速而肮脏的东西。除了我，没有人在使用它。
我现在能想到的唯一方法是使用隐藏的 iframe。有什么（相对）比这个解决方案更优雅的吗？
【问题讨论】：
标签： javascript jquery
您可以通过 YQL 休息调用轻松做到这一点。
在此处查看示例：https://developer.yahoo.com/yql/guide/yql-select-xpath.html
基本上你只需要对雅虎的 YQL 服务器做一些 AJAX 调用，它就会返回一个响应，在里面你会找到你查询的页面的 HTML。
Playground link - 如您所见，REST 查询位于页面底部。
google“scraping pages using phantomjs”，你会得到你所需要的scraping pages and parse pages and get the final result。
【讨论】：
事实上，隐藏的 iframe 可能不起作用，因为大多数浏览器不允许一个窗口中的 javascript 在另一个窗口的上下文中运行（例如 iframe）。
为什么不直接使用jQuery.get() 获取 HTML？
【讨论】：
jQuery.ajax() 怎么样？
您无法从 IFrame 访问 DOM，因为它违反了跨域资源共享 (CORS) 规则。使用 IFrame，您需要从相同的主机（即至少 foo.com 和 bar.foo.com）提供两个框架 - 如果它们在任何方面都不同，那么您必须显式设置document.domain 属性。就像这样，一个页面不能只在您的银行/脸书/其他具有敏感信息的网站中包含一个 IFrame 并简单地窃取内容。 See MDN for more
如果您真的只想从网站中提取 HTML 内容，那么使用 JavaScript 并不是最佳解决方案，因为存在有充分理由的跨源策略。
【讨论】：
简单回答：否
现代浏览器不会让你这样做，否则它们是不安全的。
可以在in this question找到请求网页的方法的详细信息，但所有这些都要求您在same domain上。
我的建议：
选项 A：请一个星期天休息（比如今天！）并学习一些基本的服务器知识。您已经了解 JavaScript，您可以在一天内学会使用 nodejs 构建一个简单的 Web 服务器！
选项 B：你真的不想接触后端的东西。考虑将您的应用程序构建为chrome app。在这种方法中，您可以ask user politely 从远程位置获取内容。
【讨论】：
您的目标是使用 JavaScript 实现“屏幕抓取”吗？
如果是这样，网站将无法运行（出于安全原因），但您仍然可以选择。
您可以通过将 Javascript 粘贴到书签中来创建“书签”，并以 javascript: 开头。然后，您只需打开网页，点击您的书签，您的代码就会被执行。
我建议首先将所有代码写入一个实际的 JavaScript 文件，然后将其粘贴到书签中。举个例子：
javascript:
alert("hello");
【讨论】：