如何分析和查询大块数据

Question

我需要：

1。分析http日志的大文件

• 我正在考虑使用 mapreduce，但我不确定在哪里托管它。我应该使用 App Engine Mapper 或 EC2+MapReduce 还是直接在我的 VPS 中使用它？
• 除了 MapReduce 之外的其他建议？

2.保存并查询结果

• 分析完所有数据后，我需要将其保存并以最佳方式呈现给用户。我应该如何保存结果？ MongoDB 是一个很好的解决方案吗？

谢谢。

问候。

Answer 1

你见过BigQuery吗？它看起来正是您所需要的。