【问题标题】:How to get the complete list of pages titles from wikipedia ?如何从维基百科获取完整的页面标题列表?
【发布时间】:2013-02-17 00:18:36
【问题描述】:

我想得到这个列表,以便以后为语言学研究工作。

API:Allpagesis limited to 500 queries。我需要它们(400 万)。

也许使用 dbpedia 攻击它。

有什么诀窍吗?

【问题讨论】:

  • dumps.wikimedia.org/backup-index.html(仅供个人或非商业用途)
  • 第一页包含 500 个结果,但您可以通过关注query-continue 获得下一个。
  • 下载 500×500 的 400 万条结果需要几天时间...

标签: sparql dbpedia wikipedia-api


【解决方案1】:

运行维基百科的维基媒体基金会定期将其所有项目的转储发布到http://dumps.wikimedia.org

您可以在此处浏览最新的 enwiki 转储(截至本文发布时):http://dumps.wikimedia.org/enwiki/20130204/

您可能最感兴趣的文件是所有页面标题的列表:http://dumps.wikimedia.org/enwiki/20130204/enwiki-20130204-all-titles-in-ns0.gz

【讨论】:

  • 谢谢 Nneonneo。由于您的评论,我实际上是自己找到的,但我很高兴验证您的答案!你给了我诀窍!
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2019-09-15
相关资源
最近更新 更多