【问题标题】:Selenium using Python: enter/provide http proxy password for firefoxSelenium 使用 Python:输入/提供 Firefox 的 http 代理密码
【发布时间】:2012-02-11 16:43:27
【问题描述】:

我想将 selenium 与受密码保护的代理一起使用。代理不是固定的,而是一个变量。所以这必须在代码中完成(只是在这台特定的机器上设置 firefox 来使用代理并不理想)。到目前为止,我有以下代码:

fp = webdriver.FirefoxProfile()
# Direct = 0, Manual = 1, PAC = 2, AUTODETECT = 4, SYSTEM = 5
fp.set_preference("network.proxy.type", 1)

fp.set_preference("network.proxy.http", PROXY_HOST)
fp.set_preference("network.proxy.http_port", PROXY_PORT)

driver = webdriver.Firefox(firefox_profile=fp)
driver.get("http://whatismyip.com")

此时,弹出对话框请求代理用户/通行证。

有没有简单的方法:

  1. 在对话框中输入用户/密码。
  2. 在较早阶段提供用户/通行证。

【问题讨论】:

  • 嘿伙计,你找到解决办法了吗?
  • @Shane 你找到解决方案了吗?
  • @ArsenIbragimov 你找到解决方案了吗?
  • 要使用带有扩展名的Firefox,请参见:stackoverflow.com/a/39903614/955422

标签: python firefox selenium selenium-webdriver


【解决方案1】:

Selenium 本身无法做到这一点。我发现有帮助的唯一方法是 here。简而言之,您需要动态添加一个进行身份验证的浏览器扩展。它比看起来要简单得多。

这是 Chrome 的工作原理(以我为例):

  1. 创建一个包含两个文件的 zip 文件 proxy.zip

background.js

var config = {
    mode: "fixed_servers",
    rules: {
      singleProxy: {
        scheme: "http",
        host: "YOU_PROXY_ADDRESS",
        port: parseInt(YOUR_PROXY_PORT)
      },
      bypassList: ["foobar.com"]
    }
  };

chrome.proxy.settings.set({value: config, scope: "regular"}, function() {});

function callbackFn(details) {
    return {
        authCredentials: {
            username: "YOUR_PROXY_USERNAME",
            password: "YOUR_PROXY_PASSWORD"
        }
    };
}

chrome.webRequest.onAuthRequired.addListener(
        callbackFn,
        {urls: ["<all_urls>"]},
        ['blocking']
);

不要忘记将 YOUR_PROXY_* 替换为您的设置。

ma​​nifest.json

{
    "version": "1.0.0",
    "manifest_version": 2,
    "name": "Chrome Proxy",
    "permissions": [
        "proxy",
        "tabs",
        "unlimitedStorage",
        "storage",
        "<all_urls>",
        "webRequest",
        "webRequestBlocking"
    ],
    "background": {
        "scripts": ["background.js"]
    },
    "minimum_chrome_version":"22.0.0"
}
  1. 将创建的 proxy.zip 添加为扩展

    from selenium import webdriver
    from selenium.webdriver.chrome.options import Options
    
    chrome_options = Options()
    chrome_options.add_extension("proxy.zip")
    
    driver = webdriver.Chrome(executable_path='chromedriver.exe', chrome_options=chrome_options)
    driver.get("http://google.com")
    driver.close()
    

就是这样。对我来说,这就像一个魅力。如果您需要动态创建 proxy.zip 或需要 PHP 示例,请转到 original post

【讨论】:

  • 迈克,它对我不起作用 - joxi.net/LmG3OVNTRbEMam 最后一行是 WebDriverException: Message: unknown error: cannot process extension #1 from unknown error: cannot read manifest (Driver info: chromedriver=2.29.461591 (62ebf098771772160f391d75e589dc567915b233),platform=Windows NT 10.0.14393 x86_64)
  • 那么如何与附加扩展通信呢?支持我想动态更改代理
  • 我已经为 SOCKS5 尝试过这个,并将方案:“http”更改为方案:“socks5”,但没有运气。任何想法如何改变 socks5 而不是 HTTP?
  • @IgorSavinkin 检查清单文件的后缀 -> .json 而不是 .js
  • 成功了!谢谢!
【解决方案2】:

代码为我工作

from selenium import webdriver

browser=webdriver.Firefox()

def login(browser):

    alert=browser.switch_to_alert()
    alert.send_keys("username"+webdriver.common.keys.Keys.TAB+"password")
    alert.accept() 

【讨论】:

  • 丑陋的方法,但唯一对我有用的方法,只是一种切换到警报的新方法:driver.switch_to.alert.send_keys(user + TAB + pass)driver.switch_to.alert.accept() 重要的是,将所有文本一起发送而不是调用 send_keys() 三次。
【解决方案3】:

你试过PROXY_HOST = "http://username:password@proxy.host.com"吗?

Also:

从 Selenium 2.0 beta 1 开始,内置支持 处理弹出对话框。

【讨论】:

  • PROXY_HOST = "username:password@proxy.host.com" 不工作。至于弹出对话框处理,我如何定位用户/传递元素来输入?
  • @Shane,你试过PROXY_HOST = "username:password@proxy.host.com" 还是PROXY_HOST = "http://username:password@proxy.host.com"。第二个应该通过基本身份验证。关于元素位置:如果您可以切换到对话框,则始终可以导航其发送tab 键信号的元素。
  • 这仅适用于过时版本的 chrome 和 selenium
猜你喜欢
  • 2023-03-27
  • 2013-09-14
  • 2022-08-14
  • 1970-01-01
  • 2018-06-11
  • 1970-01-01
  • 1970-01-01
  • 2011-12-31
  • 2010-10-30
相关资源
最近更新 更多