在数据管道中使用哪些 Python 库？

【问题标题】：What Python libraries to use in Data Pipeline?在数据管道中使用哪些 Python 库？
【发布时间】：2022-08-24 16:23:09
【问题描述】：

我在 PowerBI 中有一个 .csv，我需要自动化一个流程来每天执行上传到 BigQuery。首先，我应该记住哪些python库来开发这样的项目，我不知道去哪里找。谢谢。

询问我们的问题推荐或查找书籍、工具、软件库、教程或其他非现场资源与 Stack Overflow 无关，因为它们往往会吸引固执己见的答案和垃圾邮件。相反，describe the problem 以及迄今为止为解决它所做的工作。请带上tour 并通读help center，包括How to Ask。

标签： python database etl libraries data-pipeline

【解决方案1】：

我已经建立了一个 ETL 管道，就我而言，最需要的库是 Pandas df 和 NumPy，因为你提到你在 Power BI 中使用 .csv 上传到 BigQuery，我更喜欢 pandas df。你可以使用此链接查看 pandas df 的必要性：https://medium.com/@dhanush24shet/introduction-to-pandas-dataframes-for-absolute-beginners-part-1-3c4dc70a93d6。希望这对您有所帮助。

【讨论】：

猜你喜欢

1970-01-01
2011-05-30
2011-10-10
1970-01-01
1970-01-01
2010-09-08
1970-01-01
1970-01-01
2010-09-23

相关资源

下载 2023-04-04
下载 2021-06-06
下载 2021-06-06

最近更新更多

热门标签

Java Python linux javascript Mysql C# Docker 算法前端 SpringBoot Redis Vue spring 设计模式 .net core .net kubernetes c++ 数据库数据结构大数据 js 机器学习微服务 Android Go 程序员面试 JVM ASP.net core 云原生人工智能后端 PHP git CSS golang k8s Nginx Django mybatis 深度学习多线程 React 架构 devops 爬虫云计算 Spring Boot LeetCode