这里只是简单的记录下
首先直接安装好nltk
自然语言处理神器之NLTK安装
然后进入python
自然语言处理神器之NLTK安装
下载语料库
自然语言处理神器之NLTK安装
主要分为:
corpora:语料库
book:所用到的一些书籍的资料,作为文档
以及其他的三方库。
这些资料是很大的,最好准备1G的存储空间。

最后注意的是,中文分词,一般采用结巴分词 https://pypi.python.org/pypi/jieba/
或者
https://nlp.stanford.edu/software/segmenter.shtml
采用crf进行计算的分词方法。

中文和英文分词还是不太一样的,而自然语言处理的第一步就是分词喽。

相关文章:

  • 2021-09-15
  • 2022-12-23
  • 2021-08-11
  • 2021-12-03
  • 2022-02-02
  • 2022-12-23
  • 2021-12-04
  • 2021-04-03
猜你喜欢
  • 2021-06-18
  • 2022-01-02
  • 2022-12-23
  • 2021-12-12
  • 2022-12-23
相关资源
相似解决方案