【问题标题】:DB architecture advise for reporting dashboard报告仪表板的数据库架构建议
【发布时间】:2017-02-08 22:37:30
【问题描述】:

我正在尝试构建一个报告系统,但遇到了查询速度慢的问题,很想听听您的建议: 我应该使用哪个数据库(或任何其他大数据解决方案)来支持: - 每 15 分钟 ETL - 每天 3 亿行 - 来自 Web 应用程序的查询应在约 20 秒内返回。

目前我在 ORC 表上使用带有日期分区的 EMR,但即使在 1 个维度上使用 group by 运行查询并对度量求和,也需要超过 1 分钟。

谢谢

【问题讨论】:

  • 你试过 presto 吗?它提供更快的临时查询。

标签: database database-administration emr amazon-emr


【解决方案1】:

以下是 AWS ReInvent 中关于数据库 + 搜索层的一些精彩讨论:

https://youtu.be/K7o5OlRLtvU?t=1574

我应该使用什么数据存储?

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 2020-08-11
    • 1970-01-01
    • 1970-01-01
    • 2014-12-30
    • 2011-11-24
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多