【发布时间】:2019-04-16 07:18:24
【问题描述】:
我使用 Scrapy 进行网页抓取,使用 Polipo 作为代理,使用 Tor 作为网络。 我知道我的代理会产生轮换 IP,但 IP 位置大部分时间都在我的国家之外。在我抓取的网站上,考虑到 IP 的位置,它可能会受到一些阻碍。 那么,如何保持循环IP规则并限制使用IP的位置?
Scrapy 版本:1.5.0,Python 版本:2.7.9,Tor 版本:0.3.4.8,Vidalia:0.2.21
【问题讨论】:
标签: proxy scrapy ip tor polipo