【问题标题】:Want top frequent words in english想要英语中最常用的单词
【发布时间】:2010-09-02 07:49:37
【问题描述】:

我想要最常用的英语单词。基本上,我正在处理维基百科文本,即使在删除停用词之后也会遇到很多单词。我尝试用谷歌搜索常用词,但得到了以下链接。

http://en.wiktionary.org/wiki/Wiktionary:Frequency_lists#English

我必须手动从这些链接中抓取数据。这些词有已知的来源可以直接下载吗?

谢谢

【问题讨论】:

标签: java parsing text wikipedia


【解决方案1】:

与所有统计数据一样,您的答案将取决于您所采样的内容。是您对“英语”的定义 - 维基百科中使用的语言。由于您链接的页面表明单词的频率根据不同的样本而有所不同。对语言处理工作进行文献综述可能会给你一个过时的清单。

相信有人会用这个名字创建一个网站 - wordfrequency。更具体地说是this

【讨论】:

  • 免费列表是一个示例,仅包含每 10 个单词。您可能必须购买完整列表...
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2019-02-23
  • 1970-01-01
  • 1970-01-01
  • 2010-10-01
  • 1970-01-01
  • 2010-11-09
相关资源
最近更新 更多