【问题标题】:How to download a Spacy Model on app engine 2nd Generation?如何在第二代应用引擎上下载 Spacy 模型?
【发布时间】:2019-01-03 13:36:39
【问题描述】:

我想在 GAE 第二代(运行时:python 37)上安装 Spacy,但我不知道如何添加 python -m spacy download fr 来获取 fr 模型。

在应用引擎上有没有干净的方法?

【问题讨论】:

    标签: python python-3.x google-app-engine google-cloud-platform spacy


    【解决方案1】:

    模型是 Python 包,但它们不在 PyPI 上。您可以通过 App Engine 的 requirements.txt 文件指定它们,如下所示:

    spacy>=2.0.0,<3.0.0
    https://github.com/explosion/spacy-models/releases/download/en_core_web_sm-2.0.0/en_core_web_sm-2.0.0.tar.gz#en_core_web_sm
    

    请参阅spaCy 文档的“模型和语言”部分中的"Downloading and requiring model dependencies",以及the list of available models

    【讨论】:

    • 但是,当我使用这种方法时,加载 spacy 模型 fr_core_news_sm.load() 需要大量内存(Exceeded soft memory limit of 512 MB with 724 MB after servicing 1 requests total)。这是正常的还是有办法让它更轻?
    • 您需要增加实例大小才能将模型加载到内存中。
    猜你喜欢
    • 1970-01-01
    • 2021-11-17
    • 1970-01-01
    • 1970-01-01
    • 2023-03-07
    • 2011-01-30
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多