【发布时间】:2018-04-25 17:51:54
【问题描述】:
适用于 Apache Beam 的 Python SDK 是否像 Java SDK 一样支持 IntraBundleParallelization?我意识到 Python 中多线程的好处是有限的,但我想知道是否有任何努力或计划增加对 Python 的支持。
【问题讨论】:
标签: python google-cloud-dataflow apache-beam
适用于 Apache Beam 的 Python SDK 是否像 Java SDK 一样支持 IntraBundleParallelization?我意识到 Python 中多线程的好处是有限的,但我想知道是否有任何努力或计划增加对 Python 的支持。
【问题讨论】:
标签: python google-cloud-dataflow apache-beam
IntraBundleParallelization 已从 Dataflow Java SDK 2.X 中移除。 https://cloud.google.com/dataflow/release-notes/release-notes-java-2#individual_api_changes
原因在另一篇文章中提到: Is there an alternative to IntrabundleParallelization in Dataflow 2.1.0?
未来任何时候都不太可能添加到 Python SDK 中。
【讨论】: