【问题标题】:How to convert word to numerics using huggingface or spacy or any python based workflow如何使用 huggingface 或 spacy 或任何基于 python 的工作流将单词转换为数字
【发布时间】:2021-09-16 08:16:43
【问题描述】:

我有很多文本,其中包含不同语言的单词计数(不同的数据集,但一个数据具有一种语言,因此没有混合语言)。

喜欢

I have one apple 
I have two kids

和 我希望它转换为

I have 1 apple
I have 2 kids

是否可以使用 huggingface 或 any 将其更改为数字/整数?或对此类问题的任何建议都会有所帮助!英语 荷兰语 法语 德语 支持。

【问题讨论】:

    标签: python nltk spacy huggingface-transformers huggingface-tokenizers


    【解决方案1】:

    您可以使用一些外部软件包来轻松完成此操作。请看看这个https://pypi.org/project/word2number/

    【讨论】:

    • 我假设只有英语,我正在处理具有不同数据集的其他几种语言。
    • 你没有说你需要支持什么语言。看看pypi.org/project/word2number-i18n 支持英语、法语、葡萄牙语、俄语、斯洛伐克语、西班牙语
    【解决方案2】:

    我使用过不同版本的不同库。到目前为止,通过我的测试,我发现这在大多数情况下都可以正常工作。

    words to numerics

    这是更好的解决方案,涵盖英语法语德语西班牙语。

    【讨论】:

      猜你喜欢
      • 2016-12-10
      • 1970-01-01
      • 2021-09-16
      • 1970-01-01
      • 1970-01-01
      • 1970-01-01
      • 2018-08-15
      • 2017-09-12
      • 2013-03-13
      相关资源
      最近更新 更多