【问题标题】:How we can automate real browser instead of using selenium browser instance我们如何自动化真正的浏览器而不是使用 selenium 浏览器实例
【发布时间】:2021-06-20 19:59:27
【问题描述】:

我正在尝试抓取一个网站,但它没有在 selenium 中加载。当我在“真正的”chrome 浏览器中浏览该网站时,一切正常。有什么办法可以使用我的真实浏览器和 python 来自动化东西,而不是使用 selenium??

谢谢

【问题讨论】:

    标签: selenium selenium-webdriver web-scraping browser automation


    【解决方案1】:

    使用 selenium,我们可以自动化真正的浏览器。

    如果网站没有通过 selenium 加载,您可以检查添加所需功能是否有帮助。 在这里我们可以设置代理,禁用扩展等。有很多可用的选项。 https://chromedriver.chromium.org/capabilities

    另外,如果您可以分享显示的错误类型,那将是有帮助的。

    【讨论】:

    • 网站以某种方式检测到硒,我被拒绝访问。看起来像是某种反机器人技术。
    • 你也可以试试Robot Framework浏览器库。它不是基于硒。 robotframework-browser.org。让我知道是否有帮助
    猜你喜欢
    • 1970-01-01
    • 1970-01-01
    • 2020-07-02
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多