【问题标题】:Counting the frequency of a words in Wikipedia计算维基百科中单词的频率
【发布时间】:2019-10-15 09:58:09
【问题描述】:

我需要从维基百科中提取信息,但我不知道如何进行。我要做的是:

给定一个单词'w',我如何计算'w'在整个英文维基百科中出现的次数?网上已经有清单了吗?如果不是,我怎么能做这样的事情?我是编码新手,我正在尝试在一些与 NLP 相关的任务中做一些实验。

【问题讨论】:

  • 您至少应该告诉我们您将使用哪些工具.... Java? C?一些已经构建的应用程序?

标签: nlp wikipedia


【解决方案1】:

首先下载维基百科转储(例如 XML 格式)
如果您使用的是基于 UNIX 的操作系统(例如 LINUX 或 Mac OS X),您可以使用 grep。 见here

Python 还可用于计算文件中指定字符串的出现次数
here

【讨论】:

    猜你喜欢
    • 1970-01-01
    • 2018-03-22
    • 1970-01-01
    • 2014-08-02
    • 2015-09-13
    • 1970-01-01
    • 2015-01-07
    • 1970-01-01
    相关资源
    最近更新 更多