SparkStream之OutPutOperator类算子

一、概述

SparkStream之OutPutOperator类算子

SparkStreaming中的算子分为两类，一类是Transformation类算子，一类是OutPutOperator类算子。

  1. Transformation类算子updateStateByKey，reduceByKeyAndWindow，transform
  2. OutPutOperator类算子print，foreachRDD，saveAsTextFile

二、foreachRDD算子

      可以拿到DStream中的一个个的RDD，对拿到的RDD可以使用Transformation类算子对数据进行转换，foreachRDD方法内，拿到的RDD Transformation类算子外的代码是在Driver端执行

 

 

相关文章：

  • 2022-12-23
  • 2022-12-23
  • 2021-08-18
  • 2021-09-28
  • 2022-12-23
  • 2022-12-23
  • 2021-12-26
猜你喜欢
  • 2021-12-01
  • 2021-04-16
  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
  • 2022-12-23
  • 2021-09-11
相关资源
相似解决方案
热门标签
Java Python linux javascript Mysql C# Docker 算法 前端 SpringBoot Redis Vue spring 设计模式 .net core .net kubernetes c++ 数据库 数据结构 大数据 js 机器学习 微服务 Android Go 程序员 面试 JVM ASP.net core 云原生 人工智能 后端 PHP git CSS golang k8s Nginx Django mybatis 深度学习 多线程 React 架构 devops 爬虫 云计算 Spring Boot LeetCode