【发布时间】:2021-10-09 22:33:10
【问题描述】:
我有一个服务,它调用外部 API 来获取一个大的 xml 文件,对这个 xml 进行一些过滤并将新的 xml 发送到多个下游服务。
我想知道如何实现这一点。我应该将文件拆分成多个小文件并通过一些工具发送出去吗?或者,我应该直接使用 Spark 吗?或者,我应该使用消息队列将xml文件中的消息逐行发送出去吗?
如果您有任何建议或意见,我将不胜感激。非常感谢!
【问题讨论】:
标签: xml apache-spark message-queue