如果您必须这样做,您可以手动删除泡菜的相关部分。使用pickletools.dis 可以实现这一点……但是,您必须了解pickle 的递归工作方式。 Pickles 是通过递归到一个对象中来制作的,并在对象本身可以被腌制之前腌制它的状态依赖项……然后对所有依赖项进行类似的递归……等等,直到那个特定的递归分支遇到一个不需要依赖项的对象泡菜。然后一旦所有的依赖对象都被pickle了,你就完成了。
在这里你可以看到pickletools.dis 显示泡菜的每个部分是什么:
>>> import pickletools
>>> import pickle
>>> pik = pickle.dumps(dict(zip(list('abcde'),[1,2,3,4,5])))
>>> pickletools.dis(pik)
0: ( MARK
1: d DICT (MARK at 0)
2: p PUT 0
5: S STRING 'a'
10: p PUT 1
13: I INT 1
16: s SETITEM
17: S STRING 'c'
22: p PUT 2
25: I INT 3
28: s SETITEM
29: S STRING 'b'
34: p PUT 3
37: I INT 2
40: s SETITEM
41: S STRING 'e'
46: p PUT 4
49: I INT 5
52: s SETITEM
53: S STRING 'd'
58: p PUT 5
61: I INT 4
64: s SETITEM
65: . STOP
highest protocol among opcodes = 0
>>> pik
"(dp0\nS'a'\np1\nI1\nsS'c'\np2\nI3\nsS'b'\np3\nI2\nsS'e'\np4\nI5\nsS'd'\np5\nI4\ns."
这里是dill,显示了物品腌制的路线。像F1: … 这样的打印输出是酸洗对象的开始,而# F1 是酸洗对象的结束:
>>> import dill
>>> dill.detect.trace(True)
>>> dill.dumps(dict(zip(list('abcde'),[1,2,3,4,5])))
D2: <dict object at 0x10c5c9e88>
# D2
'\x80\x02}q\x00(U\x01aq\x01K\x01U\x01cq\x02K\x03U\x01bq\x03K\x02U\x01eq\x04K\x05U\x01dq\x05K\x04u.'
>>>
>>> def foo(x):
... def bar(y):
... return x+y
... return bar
...
>>> dill.dumps(foo)
F1: <function foo at 0x10c60a9b0>
F2: <function _create_function at 0x10c5a68c0>
# F2
Co: <code object foo at 0x10b6130b0, file "<stdin>", line 1>
F2: <function _unmarshal at 0x10c5a6758>
# F2
# Co
D1: <dict object at 0x10b51a168>
# D1
D2: <dict object at 0x10c5c4910>
# D2
# F1
'\x80\x02cdill.dill\n_create_function\nq\x00(cdill.dill\n_unmarshal\nq\x01U\xd6c\x01\x00\x00\x00\x02\x00\x00\x00\x02\x00\x00\x00\x03\x00\x00\x00s\x13\x00\x00\x00\x87\x00\x00f\x01\x00d\x01\x00\x86\x00\x00}\x01\x00|\x01\x00S(\x02\x00\x00\x00Nc\x01\x00\x00\x00\x01\x00\x00\x00\x02\x00\x00\x00\x13\x00\x00\x00s\x08\x00\x00\x00\x88\x00\x00|\x00\x00\x17S(\x01\x00\x00\x00N(\x00\x00\x00\x00(\x01\x00\x00\x00t\x01\x00\x00\x00y(\x01\x00\x00\x00t\x01\x00\x00\x00x(\x00\x00\x00\x00s\x07\x00\x00\x00<stdin>t\x03\x00\x00\x00bar\x02\x00\x00\x00s\x02\x00\x00\x00\x00\x01(\x00\x00\x00\x00(\x02\x00\x00\x00R\x01\x00\x00\x00R\x02\x00\x00\x00(\x00\x00\x00\x00(\x01\x00\x00\x00R\x01\x00\x00\x00s\x07\x00\x00\x00<stdin>t\x03\x00\x00\x00foo\x01\x00\x00\x00s\x04\x00\x00\x00\x00\x01\x0f\x02q\x02\x85q\x03Rq\x04c__builtin__\n__main__\nU\x03fooq\x05NN}q\x06tq\x07Rq\x08.'
>>>
>>> dill.detect.trace(False)
但是,我最好的建议是,如果您打算从 pickle 中删除对象,那么请以更明智的方式进行 pickle……假设您想要 pickle 对象的字典(就像 globals() 中的所有内容一样)。通过使用klepto,您可以将字典中的每个对象作为腌制对象保存到单个目录中的不同文件中。
>>> import klepto
>>> d = klepto.archives.dir_archive('saveme', serialized=True, cached=False)
>>> d.update(globals())
>>> d.keys()
['pickletools', 'dill', 'pik', 'd', '__builtins__', 'klepto', '__package__', '__name__', 'foo', 'pickle', '__doc__']
>>>
我们退出,并开始一个新的口译会话:
Python 2.7.10 (default, May 25 2015, 13:16:30)
[GCC 4.2.1 Compatible Apple LLVM 5.1 (clang-503.0.40)] on darwin
Type "help", "copyright", "credits" or "license" for more information.
>>> import klepto
>>> d = klepto.archives.dir_archive('saveme', serialized=True, cached=False)
>>> d.keys()
['pickletools', 'dill', 'pik', 'd', '__builtins__', 'klepto', '__package__', '__name__', 'foo', 'pickle', '__doc__']
>>> for i,j in d.items():
... globals()[i] = j
...
>>> foo(3)(4)
7
>>>
每个对象都可以从它自己的文件中单独访问……所以你可以简单地pop 其中一个。您还可以使用cached=True,将您喜欢的任何对象加载到内存中(未显示)——使用cached=False,不会将任何对象加载到内存中,而是直接与文件后端交互。
>>> x = d.pop('d')
>>> del d['pik'], x
>>> d.keys()
['pickletools', 'dill', '__builtins__', 'klepto', '__package__', '__name__', 'foo', 'pickle', '__doc__']
>>> d['foo'](3)(4)
7