如何检查 xpath 中是否存在元素，如果不存在则返回 null/no 值？

Question

我正在尝试从给定存储在“数据”中的 url 列表的网站中抓取数据。

我注意到一些 url 没有“og_price”和“discount”的 xpath，我收到 NoSuchElement 错误，或者直接说“og_price”和“discount”未定义大概是因为某些 url 没有有那个 xpath。

我想检查 url 中是否存在 xpath（我试图用 try-except 来做）并返回一个空值或只是字符串“no”，但我被困在如何做到这一点上，因为我稍后会调用“ "og_price" 和 "discount" 上的 .text" 会说 'str' 对象没有属性 '.text'

for url in data:
    driver.get(url)
    item_name = driver.find_element_by_xpath('//span[@id="productTitle"]')
    brand_name = driver.find_element_by_xpath('//*[@class="a-spacing-small"][.//*[contains(.,"Brand")]]/td[@class="a-span9"]/span')
    price = driver.find_element_by_xpath('//div[@class="a-section a-spacing-micro"]/span[@id="price_inside_buybox"]')
    try: 
        og_price = driver.find_element_by_xpath('//span[@class="priceBlockStrikePriceString a-text-strike"]')
        discount = driver.find_element_by_xpath('//td[@class="a-span12 a-color-price a-size-base priceBlockSavingsString"]')
    except NoSuchElementException:
        og_price = null
        discount = null
    

    row = { 'Item Name': item_name.text,
            'Brand Name': brand_name.text,
            'Price': price.text,
            'Original Price': og_price.text,
            'URL': url
          }

Answer 1

@Harry Kim 检查元素是否存在的正确方法是像上面那样将检查包装在 try/catch 块中。要解决空对象异常的问题，您可以在将元素分配给行映射之前进行 if 检查。类似的，

    try: 
        og_price = driver.find_element_by_xpath('//span[@class="priceBlockStrikePriceString a-text-strike"]')
        discount = driver.find_element_by_xpath('//td[@class="a-span12 a-color-price a-size-base priceBlockSavingsString"]')
    except NoSuchElementException:
        og_price = None
        discount = None
    

    row = { 'Item Name': item_name.text,
            'Brand Name': brand_name.text,
            'Price': price.text,
            'URL': url
          }
    if og_price is not None:
          row["Original Price"] = og_price.text
    else:
          row["Original Price"] = "N/A"

如果您有明确定义的 css 标签，使用 find_element_by_css_selector 或 find_element_by_id 等函数也是一个好主意。只有当目标元素确实具有正确的 id 或 css 标签时，我们才会使用 Xpath。