如何从 h3 Selenium/Python 获取 href？

Question

网址：https://www.piie.com/research/economic-issues/coronavirus

我正在尝试从“字段字段--标题”类中提取 href，但我的编码不起作用

driver.get('https://www.piie.com/research/economic-issues/coronavirus')

for i in driver.find_elements_by_class_name('field field--title'):
    for a in i.find_elements_by_css_selector('a'):
        print(a.get_attribute('href'))
        print(a.text)

HTML 如下所示：

谁能帮我解决这个问题？谢谢

Answer 1

您应该等待元素出现在网页中，然后再尝试从它们中获取内容。因为 Selenium 有隐式和显式等待解决方案。您可以找到关于等待here 和here 的非常好的信息。

在下面的代码中，我使用显式等待元素可见以便能够从中获取文本。

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC

with webdriver.Chrome() as driver:
    wait = WebDriverWait(driver, 10)

    driver.get('https://www.piie.com/research/economic-issues/coronavirus')

    items = wait.until(EC.visibility_of_all_elements_located((By.CSS_SELECTOR, '.field--title a')))
    for item in items:
        print(item.text, item.get_attribute('href'))