将 Selenium WebDriver 与 Tor 一起使用

Question

因为 Tor Browser Bundle 只是 Firefox 的一个补丁版本，看来应该可以将 FirefoxDriver 与 Tor 浏览器一起使用。这是我迄今为止尝试过的：

String torPath = "C:\\Users\\My User\\Desktop\\Tor Browser\\Start Tor Browser.exe";
String profilePath = "C:\\Users\\My User\\Desktop\\Tor Browser\\Data\\Browser\\profile.default";
FirefoxProfile profile = new FirefoxProfile(new File(profilePath));
FirefoxBinary binary = new FirefoxBinary(new File(torPath));
FirefoxDriver driver = new FirefoxDriver(binary, profile);
driver.get("http://www.google.com");

这会导致打开一个空白的 Tor 浏览器页面并弹出一条消息：您的 Firefox 配置文件无法加载。它可能丢失或无法访问。

我知道配置文件有效/兼容，因为我可以通过以下方式成功启动浏览器和配置文件：

binary.startProfile(profile, profilePath, ""));

但是，我不知道如何向以这种方式打开的浏览器发送命令。

我发现了类似的问题，但我专门寻找 Java 解决方案，最好在 Windows 上进行测试。

我正在使用可以下载的独立 Selenium 库here 和可以下载的 Tor 浏览器捆绑包here。

Answer 1

因为 Tor Browser Bundle 不允许我使用 WebDriver 扩展，所以我找到了一种解决方法，可以从常规的 Firefox 浏览器运行 Tor。使用这种方法，只要打开 Tor 浏览器，就可以在普通的 Firefox 浏览器上使用 Tor。

• 打开 Tor 浏览器：

  File torProfileDir = new File(
          "...\\Tor Browser\\Data\\Browser\\profile.default");
  FirefoxBinary binary = new FirefoxBinary(new File(
          "...\\Tor Browser\\Start Tor Browser.exe"));
  FirefoxProfile torProfile = new FirefoxProfile(torProfileDir);
  torProfile.setPreference("webdriver.load.strategy", "unstable");
  
  try {
      binary.startProfile(torProfile, torProfileDir, "");
  } catch (IOException e) {
      e.printStackTrace();
  }
  

• 使用一些配置打开 Firefox：

  FirefoxProfile profile = new FirefoxProfile();
  profile.setPreference("network.proxy.type", 1);
  profile.setPreference("network.proxy.socks", "127.0.0.1");
  profile.setPreference("network.proxy.socks_port", 9150);
  FirefoxDriver = new FirefoxDriver(profile);
  

• 关闭浏览器。请注意，如果您打算进行大量关闭和重新打开（有助于获取新 IP 地址），我建议将配置文件首选项 toolkit.startup.max_resumed_crashes 设置为较高的值，例如 9999。

  private void killFirefox() {
      Runtime rt = Runtime.getRuntime();
  
      try {
          rt.exec("taskkill /F /IM firefox.exe");
          while (processIsRunning("firefox.exe")) {
              Thread.sleep(100);
          }
      } catch (Exception e) {
          e.printStackTrace();
      }
  }
  
  private boolean processIsRunning(String process) {
      boolean processIsRunning = false;
      String line;
      try {
          Process proc = Runtime.getRuntime().exec("wmic.exe");
          BufferedReader input = new BufferedReader(new InputStreamReader(proc.getInputStream()));
          OutputStreamWriter oStream = new OutputStreamWriter(proc.getOutputStream());
          oStream.write("process where name='" + process + "'");
          oStream.flush();
          oStream.close();
          while ((line = input.readLine()) != null) {
              if (line.toLowerCase().contains("caption")) {
                  processIsRunning = true;
                  break;
              }
          }
          input.close();
      } catch (IOException e) {
          e.printStackTrace();
      }
      return processIsRunning;
  }
  

Answer 2

我会尝试指定现有配置文件之一的路径并为 Tor 初始化您的配置文件实例，以便您的代码如下所示：

String torPath = "..\\Tor Browser\\Browser\\firefox.exe";
String profilePath = "..\\Tor Browser\\Data\Browser\\profile.default";
FirefoxProfile profile = new FirefoxProfile(new File(profilePath));
FirefoxBinary binary = new FirefoxBinary(new File(torPath));
FirefoxDriver driver = new FirefoxDriver(binary, profile);
driver.get("http://www.google.com");

我没有尝试这个，因为我家里没有设置 WebDriver，但这应该允许你指定一个配置文件。

Answer 3

我下载了 TorBrowser，我可以毫无问题地调用它，使用以下代码（它是 Mac OS）。 所以我认为firefox webdriver和最新版Tor浏览器的兼容性应该没有问题。

String torPath = "/Volumes/DATA/Downloads/Tor.app/Contents/MacOS/TorBrowser.app/Contents/MacOS/firefox";
String profilePath = "/Users/mimitantono/Library/Application Support/Firefox/Profiles/1vps9kas.default-1384778906995";
FirefoxProfile profile = new FirefoxProfile(new File(profilePath));
FirefoxBinary binary = new FirefoxBinary(new File(torPath));
FirefoxDriver driver = new FirefoxDriver(binary, profile);
driver.get("http://www.google.com/webhp?complete=1&hl=en");

我知道您已经使用binary.startProfile 测试了您的配置文件的路径，但我认为您可以再次尝试使用斜杠而不是反斜杠来指定路径，交叉检查该文件是否存在 -> profile.default，然后使用绝对路径而不是相对路径 -> ../.

Answer 4

此代码在 ubuntu 中也运行良好。 这是一个示例（JUnit4）：

package qa2all;

import java.io.File;
import java.util.concurrent.TimeUnit;

import org.junit.After;
import org.junit.Before;
import org.junit.Test;
import org.openqa.selenium.WebDriver;
import org.openqa.selenium.firefox.FirefoxBinary;
import org.openqa.selenium.firefox.FirefoxDriver;
import org.openqa.selenium.firefox.FirefoxProfile;


public class HTMLUnit {
    private WebDriver driver;
    private String baseUrl;
    private StringBuffer verificationErrors = new StringBuffer();

    @Before
    public void setUp() throws Exception {
        //driver = new HtmlUnitDriver();    
        //driver = new FirefoxDriver();
        String torPath = "/home/user/Dropbox/Data/TorBrowser/Linux/32/start-tor-browser";
        String profilePath = "/home/user/Dropbox/Data/TorBrowser/Linux/32/TorBrowser/Data/Browser/profile.default/";
        FirefoxProfile profile = new FirefoxProfile(new File(profilePath));
        FirefoxBinary binary = new FirefoxBinary(new File(torPath));
        driver = new FirefoxDriver(binary, profile);        
        baseUrl = "https://qa2all.wordpress.com";
        driver.manage().timeouts().implicitlyWait(30, TimeUnit.SECONDS);
    }

    @Test
    public void testUntitled() throws Exception {
        driver.get(baseUrl + "/");

    }

    @After
    public void tearDown() throws Exception {
        driver.quit();
        String verificationErrorString = verificationErrors.toString();
        if (!"".equals(verificationErrorString)) {
            fail(verificationErrorString);
        }
    }

    private void fail(String verificationErrorString) {
        // TODO Auto-generated method stub

    }
}

Answer 5

如果您主要关心使用 Tor 远程控制浏览器（并且可能更喜欢使用 Tor 浏览器而不是原版 Firefox），您可以使用 Mozilla 的 Marionette。像这样使用

要与 Tor 浏览器一起使用，请在启动时通过以下方式启用 marionette

Browser/firefox -marionette

（在包内）。然后，您可以通过

from marionette import Marionette
client = Marionette('localhost', port=2828);
client.start_session()

并加载一个新页面，例如通过

url='http://mozilla.org'
client.navigate(url);

如需更多示例，请参阅tutorial 以及更多文档。

(copy)