Spring-Boot Scala Spark-Streaming Kafka 集成方案

使用 Scala 开发 Spring Boot，并在 Spring-Boot 上集成 Spark Streaming，并获取 Kafka 内数据流进行实时计算。（本地单机调试和 Spark-Submit 提交集群运行，本地可以执行，发布集群未必能成功运行）

目录：

1. 集成方式
   • Maven Pom 文件介绍
   • 资源配置介绍
   • Scala 启动 Spring-Boot 方法介绍
   • Maven 打包方法介绍
2. 任务调度执行
   • 本地开发调试执行
   • Spark-Submit 提交 Yarn 集群运行
3. 常见问题解决办法
   • Kafka 版本问题
   • Kafka 序列化异常
   • gson-2.2.4.jar 包冲突问题
   • Hadoop 版本差异问题
4. 示例清单
   • 目录结构
   • Kafka消费实现
   • 组件版本

阅读全文: http://gitbook.cn/gitchat/activity/5dde44aecf3f381d5d04ce96

您还可以下载 CSDN 旗下精品原创内容社区 GitChat App ，阅读更多 GitChat 专享技术内容哦。