Apache Superset - 仪表板切片的并发加载（雅典娜）

Question

我有一个仪表板，其中设置了几个切片。切片一个接一个地加载，而不是同时加载。这会导致糟糕的用户体验。我的数据位于 S3 上，我正在使用 Athena 连接器进行查询。我可以看到对 Athena 的调用是按顺序触发的，每个查询在运行前等待它之前的一个完成。

我正在使用 gevent，据我所知这应该不是问题？

以下是我的 Superset 配置的摘录：

SUPERSET_WORKERS = 8
WEBSERVER_THREADS = 8

它曾经分别设置为 2 和 1，但我将其分别设置为 8，看看这是否可能是问题所在。不过我得到了相同的结果。

这是一个简单的错误配置问题还是我遗漏了什么？

Answer 1

在增加gunicorn 的工作程序和线程之前，了解 multiProcessing 和 multiThreading 很重要。如果您正在查看CPU intense operations，您需要很多进程，而您可能需要很多线程用于I/O intensive 操作。

对于您的问题，您不需要很多流程；但是进程中的线程。使用该配置，下一步将是调试如何生成greenlets。 （gevents 促进了concurrency。并发！== 并行处理）。

要使用多个线程引导 gunicorn，您可以执行以下操作：

gunicorn -b localhost:8000 main:app --threads 30 --reload

请发布更多代码以提供有针对性的帮助。