【发布时间】:2019-05-30 01:06:07
【问题描述】:
我正在使用的 API 遇到了限制。目前它可以返回的最大行数是 10000。目标是访问一个月的数据,有时可以达到 200000 行。此 API 允许按 start_at_row 和 row_limit 进行过滤。它还在响应中返回 row_count。我需要发出多个请求才能捕获所有 200000 行。我一直在弄清楚如何在前 10000 行之后触发下一个请求,以及如何准确地选择 10001 并运行接下来的 10000 行。有没有用于此问题的通用方法?欢迎任何建议。让我知道我可以从我的代码中提供哪些有用的信息。
【问题讨论】:
标签: xml python-3.x beautifulsoup