如何缓存泡菜负载以避免重新加载每次运行？

Question

我有一个非常大的 pickle 文件，我正在对它进行一些分析。

加载它最多需要一分钟，我每天要加载数百次。

有没有办法将文件内容保存在内存中并避免重新加载？

限制：

• 我不想使用笔记本
• 我希望能够更改我的主脚本，而不是在控制台中运行
• 我正在使用 Pycharm

谢谢

Answer 1

你能不将未腌制的对象目录保留在内存中并重新使用它吗？

import pickle

_CACHED_OBJ = None

def load_object(pickled_value):
    global _CACHED_OBJ
    _CACHED_OBJ = pickle.loads(pickled_value)


def run_your_code():
    # You can use _CACHED_OBJ which is already loaded
    pass


def init():
    load_object(pickled_value)

P.S：我不确定您的代码是如何运行的。如果您正在运行脚本，当然运行时将是短暂的，这将不起作用。如果您正在运行 Web 服务器或类似长时间运行的进程，并且需要多次访问 pickle，这将是一个潜在的解决方案。