【发布时间】:2012-02-28 15:47:36
【问题描述】:
我最近参与了一个数据挖掘项目,为此我需要 100 GB 的纯文本进行测试。我厌倦了整天在网上搜索。有人请提供链接帮助我,我在哪里可以下载这样的文本文件?
【问题讨论】:
-
您是否正在尝试下载 100GB 的文本文件.....
-
是的..!实际上超过 100 GB.. 1TB 是我们的目标..!
-
在一个 7zip 文件中获取整个古腾堡:gutenberg-tar.com
-
这也可能很方便:blog.archive.org/2012/04/26/downloading-in-bulk-using-wget 都是为了未来的搜索者的利益 - 我意识到这个问题已经过时了 ;)
-
这个链接直接带你到wiki下载页面:dumps.wikimedia.org/enwiki/latest
标签: text text-files text-database