PhantomJs 无法通过 socks5 代理访问重定向 url

Question

我正在使用带有 socks5 代理（用于 tor）的 PhantomJs 编写一个脚本来访问一个重定向到其他 url 的 url，但它失败了。

但是当我在没有代理的情况下访问相同的url时，它是成功的。

另外，当我通过socks5代理访问其他一些不重定向的url时，比如whatismyipaddress.com，它是成功的。

知道为什么当我结合 socks5 代理和访问重定向 url 时，它没有发生，有什么解决方法吗？

谢谢。

Answer 1

如果这是用 Python 编写并使用 Selenium 和 PhantomJS，我推荐以下内容：

我将首先导入 Selenium 并通过 npm 在节点中安装 PhantomJS，就像我从 this answer 粘贴的示例一样。 (npm -g install phantomjs) 那么：

使用 Selenium 的示例

from selenium import webdriver
service_args = [
'--proxy=127.0.0.1:9050',
'--proxy-type=socks5',
]
driver = webdriver.PhantomJS('../path_to/phantomjs',service_args=service_args)
driver.set_window_size(1024, 768) # optional
driver.get('https://google.com/')
driver.save_screenshot('screen.png') # save a screenshot to disk
sbtn = driver.find_element_by_css_selector('button.gbqfba')
sbtn.click()

否则，如果您想尝试使用 urllib (Python 3) 或 urllib2 (Python 2.7x) 包，那么以下工作：

1. 确保在 Python 3.x 上使用 pip install SocksPy 或 pip3 install SocksPy 安装了 SocksPy 包。
2. 将所有内容导入：import socks, socket

3. 请参阅我在此处提供的示例代码，它将您的连接和 DNS 查找绑定到通过 socks 连接：

   设置 TOR 连接

   SOCKS_PORT = 9050

   设置 socks 代理并包装 url lib 模块

   socks.setdefaultproxy(socks.PROXY_TYPE_SOCKS5, '127.0.0.1', SOCKS_PORT)

   socket.socket = socks.socksocket

   通过套接字执行 DNS 解析

   def getaddrinfo(*args): return [(socket.AF_INET, socket.SOCK_STREAM, 6,'', (args[0], args[1]))] socket.getaddrinfo = getaddrinfo

   然后，您构建的任何 urllib.request() 将默认使用您刚刚设置的代理。

我希望这两个选项都能为您指明正确的方向。一旦你澄清了你所面临的确切设置和问题，我可以更新。