【问题标题】:iterating over mongo document in python在python中迭代mongo文档
【发布时间】:2012-05-11 09:20:36
【问题描述】:

请看下面的代码:

collection = db_name.get_db().collection_name
print collection
# prints .. Collection(Database(Connection('localhost', 27017), u'db_name'), u'colelction_name')


for key in some_dict.keys():
        query = {"p_id":key}
        document = collection.find(query)
        print document
        # gives <pymongo.cursor.Cursor object at 0x7f13f3049b10>

现在我想检索此文档.. 并获取数据。 但如果我这样做:

       for d in document:
            print d

我收到以下错误

    File "/usr/local/lib/python2.7/dist-packages/pymongo/cursor.py", line 703, in next
   if len(self.__data) or self._refresh():
 File "/usr/local/lib/python2.7/dist-packages/pymongo/cursor.py", line 666, in _refresh
self.__uuid_subtype))
  File "/usr/local/lib/python2.7/dist-packages/pymongo/cursor.py", line 628, in __send_message
self.__tz_aware)
  File "/usr/local/lib/python2.7/dist-packages/pymongo/helpers.py", line 101, in _unpack_response
error_object["$err"])

我做错了什么? 谢谢

【问题讨论】:

    标签: python mongodb pymongo mongodb-query


    【解决方案1】:

    另外,请注意 pymongo 有几个可用于游标的构造函数选项:

    https://github.com/mongodb/mongo-python-driver/blob/master/pymongo/cursor.py

    其中一些选项(例如,await_data、exhaust)将在加速游标迭代方面产生重大影响。

    根据查询的长度和复杂性,您还可以在单​​独的线程中处理数据,以便尽可能快地运行游标,同时触发异步任务。

    我发现,运行单个线程来耗尽 mongo 游标,并使用单独的线程来处理其中的数据可以大大提高游标吞吐量,而不管游标带来的数据量如何。

    【讨论】:

      【解决方案2】:

      当 API 和 mongo 提供适合此的查询时,我不明白您为什么要尝试使用这种方法获取一批文档?

      如果 some_dict.keys() 返回一个 id 列表,并且您想要检索与这些 id 匹配的文档,为什么不使用适当的“in”查询?

      docs = collection.find({'p_id': {'$in':some_dict.keys()}})
      print docs
      # <pymongo.cursor.Cursor object at 0x10112dfd0>
      print [d for d in docs]
      # [{DOC1}, {DOC2}, {...}]
      

      按照@ich 的建议,pymongo api 文档解释了一切,以及阅读 mongodb 查询语言。

      如果这不是您想要的,那么您的意图在您的问题中并不明确。它看起来就像您想要获得一批与 id 列表匹配的文档

      【讨论】:

        【解决方案3】:

        您要检索“此文档” - 然后使用 官方方法 获取 一个 符合您条件的文档:find_one():

        http://api.mongodb.org/python/2.2/api/pymongo/collection.html

        阅读基本的 API 文档是你的朋友。

        【讨论】:

          猜你喜欢
          • 1970-01-01
          • 2021-01-10
          • 2020-11-06
          • 1970-01-01
          • 2012-07-08
          • 1970-01-01
          • 1970-01-01
          • 1970-01-01
          • 2012-09-18
          相关资源
          最近更新 更多