Python Mongodb 批量大小限制超时

Question

我正在尝试抓取一个巨大的 (5gb) mongo 数据库，因此我限制了批处理大小以便于管理。但是，我仍然收到超时错误：/

诚然，我的 mongo 知识不是最好的，所以如果我在做一些完全愚蠢的事情，请告诉我！我已经搜索了文档和其他问题，但没有一个答案有帮助。

这是我想要做的：

from pymongo import MongoClient

collection = MongoClient(host="mongodb://xxx@xxx")
cursor = collection.all_companies.companies
batch = cursor.find().batch_size(1).limit(1) # I tried w/ other numbers too

for item in batch:
    print item

这就是我得到的：

pymongo.errors.ServerSelectionTimeoutError: xxx:xxx: 超时

Answer 1

要获得多个文档作为查询的结果，我们使用 find() 方法。 find() 返回一个 Cursor 实例，它允许我们遍历所有匹配的文档。

About find()

About Cursor

connection = MongoClient(host="mongodb://xxx@xxx")
collection = connection.all_companies.companies
for item in collection.find():
    print item