我怎样才能得到一个在 python 中延迟的网页？

Question

我尝试做一个网络爬虫，所以第一步是分析网页。 我使用 urllib2.urlopen("url") 来获取网页。但是由于许多 js 等，网页需要加载一段时间。所以每次我得到网页的一部分。它阻止了我。 谁能给我一些建议。

Answer 1

如果你想在python中执行js代码，你可以试试PyExecJS。 但是对于简单的爬虫来说，通常运行客户端的成本太高了。