在 Python 上使用 Dataflow Beam 读取 CSV 标头并保存

【问题标题】：Reading CSV header and saving with Dataflow Beam on Python在 Python 上使用 Dataflow Beam 读取 CSV 标头并保存
【发布时间】：2021-06-11 13:15:21
【问题描述】：

如何在 Apache Beam Python 中读取第一行并存储标头数据？

【问题讨论】：

能否为这个问题添加更多细节？

标签： apache-beam dataflow

【解决方案1】：

看看这个example。看看UsCovidDataCsvReader 是如何解析输入的。

基本思路是

读取标头并从中构建架构
用skip_header_lines=1读取文件
使用架构解析输入以构建 PCollection

【讨论】：

猜你喜欢

1970-01-01
1970-01-01
1970-01-01
1970-01-01
2021-06-11
1970-01-01
1970-01-01
1970-01-01
1970-01-01

相关资源

下载 2023-01-01
下载 2023-04-08
下载 2023-03-28
下载 2023-01-23

最近更新更多

热门标签

Java Python linux javascript Mysql C# Docker 算法前端 SpringBoot Redis Vue spring 设计模式 .net core .net kubernetes c++ 数据库数据结构大数据 js 机器学习微服务 Android Go 程序员面试 JVM ASP.net core 云原生人工智能后端 PHP git CSS golang k8s Nginx Django mybatis 深度学习多线程 React 架构 devops 爬虫云计算 Spring Boot LeetCode