Selenium 找不到任何元素

Question

所以我有一个网络爬虫，首先需要通过给定网站的 cookie 横幅。通常我只是通过 id 或 classname 定位元素并完成它，但在this site 上找不到任何元素。我已经尝试/检查了以下内容：

• 感兴趣的元素是<div id="cookiescript_accept" tabindex="0" role="button" data-cs-i18n-text="[]">Alles accepteren</div>
• 元素不是 iframe 的一部分
• 该元素不是影子 DOM 的一部分
• 使用 wait.until(ExpectedConditions.visibilityOfElementLocated 会达到 15 秒超时
• 使用driver.executeScript("return document.getElementById('cookiescript_accept');"); 也不起作用
• 父元素和parent的父元素也找不到

我对 Selenium 和 HTML 还很陌生，所以我一定遗漏了一些东西，如果你知道那是什么，请告诉我

代码：

public void loadUrl(String url) {
    System.out.println("\t\t- loadUrl " + url);
    idle5000();

    driver.get(url);
    idle5000();

    setWindowSize();
    idle5000();
    printFirefoxCPU();

    scrollViewport();
    idle5000();
    printFirefoxCPU();
}
loadUrl("https://www.schoolplaten.com/");
prepRunnable.getDriver().findElement(By.id("cc-cookiescript_accept")).click();
//  -> NoSuchElementException
WebDriverWait wait = new WebDriverWait(prepRunnable.getDriver(), 15);
wait.until(ExpectedConditions.visibilityOfElementLocated(By.id("cookiescript_accept")));
//  -> Timeout
WebElement elem = (WebElement) prepRunnable.getDriver().executeScript("return document.getElementById('cookiescript_accept');");
elem.click();
//  -> elem is null

Answer 1

我可以使用下面的 XPath 找到 Web 元素

//*[name()='div' and @id='cookiescript_accept']

并且可以在下面的代码的帮助下执行点击它：

WebDriverWait wait = new WebDriverWait(driver, 30);
wait.until(ExpectedConditions.elementToBeClickable(By.xpath("//*[name()='div' and @id='cookiescript_accept']"))).click();

Answer 2

对于元素 ALLES ACCEPTEREN 上的 click()，您可以使用以下任一 Locator Strategies：

• cssSelector:

  driver.findElement(By.cssSelector("div#cookiescript_accept")).click();
  

• xpath:

  driver.findElement(By.xpath("//div[@id='cookiescript_accept']")).click();
  

但是，元素是动态元素，所以要在元素上click() 需要诱导WebDriverWait 为elementToBeClickable() 并且可以使用以下Locator Strategies 之一：

• cssSelector:

  new WebDriverWait(driver, 20).until(ExpectedConditions.elementToBeClickable(By.cssSelector("div#cookiescript_accept"))).click();
  

• xpath:

  new WebDriverWait(driver, 20).until(ExpectedConditions.elementToBeClickable(By.xpath("//div[@id='cookiescript_accept']"))).click();
  

---

另类

您也可以使用executeScript()，如下所示：

• cssSelector:

  ((JavascriptExecutor)driver).executeScript("arguments[0].click();", new WebDriverWait(driver, 20).until(ExpectedConditions.elementToBeClickable(By.cssSelector("div#cookiescript_accept"))));
  

• xpath:

  ((JavascriptExecutor)driver).executeScript("arguments[0].click();", new WebDriverWait(driver, 20).until(ExpectedConditions.elementToBeClickable(By.xpath("//div[@id='cookiescript_accept']"))));
  

---

参考

你可以在NoSuchElementException找到详细讨论：

• NoSuchElementException, Selenium unable to locate element