【问题标题】:Where can I find a huge amount of text files? [duplicate]我在哪里可以找到大量的文本文件? [复制]
【发布时间】:2012-02-28 15:47:36
【问题描述】:

可能重复:
Looking for dataset to test FULLTEXT style searches on

我最近参与了一个数据挖掘项目,为此我需要 100 GB 的纯文本进行测试。我厌倦了整天在网上搜索。有人请提供链接帮助我,我在哪里可以下载这样的文本文件?

【问题讨论】:

标签: text text-files text-database


【解决方案1】:

【讨论】:

  • 你能不能给我一个具体的链接..!我看到了一个大约 230 GB 的 xml 格式的压缩文件。这是链接.. en.wikipedia.org/wiki/Wikipedia:Database_download.. 在下载之前我想知道里面到底有什么.. ps:我们正在寻找有一些有意义的文本的文本文件......比如对话、纪录片等。 !
  • 它实际上是维基媒体转储文件的转储文件。通常它包含xml格式的维基百科文章。所以你可以查看它。我认为它应该对你有帮助。
【解决方案2】:

您要搜索什么类型的文本?会话、文章、书籍 - 或所有内容的良好传播?

古腾堡计划可能是一个好的开始: http://www.gutenberg.org/

维基百科还允许您下载文章存档: http://en.wikipedia.org/wiki/Wikipedia:Database_download

【讨论】:

  • 是的……任何文本文件都可以……是的……会话、文章、纪录片、小说……等等……!
  • Project Gutenberg 可能是您最好的选择,那里有超过 38,000 本书免费。其中大部分都可以作为纯文本文件下载。
  • 有没有更好的方法......而不是一个接一个地下载每个文本文件......我可以得到一个大小约为 1GB 的压缩文件吗??
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 2011-10-14
  • 1970-01-01
  • 1970-01-01
  • 2011-09-13
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
相关资源
最近更新 更多