更多精彩内容参见云栖社区大数据频道https://yq.aliyun.com/big-data;此外,通过Maxcompute及其配套产品,低廉的大数据分析仅需几步,详情访问https://www.aliyun.com/product/odps


本讲义出自Jim Dowling在Spark Summit East 2017上的演讲,主要介绍了在容易进行调试的YARN上构建多租户Spark streaming应用程序的过程中遇到的挑战,并展示了如何使用ELK技术栈对Spark streaming应用程序进行日志记录和调试,以及如何使用Graphana和Graphite对应用进行监控以及优化以及使用Dr Elephant终止Spark streaming任务。


【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

【Spark Summit East 2017】Kafka、YARN与Spark Streaming作为一个服务

相关文章: