如何从tripadvisor python中抓取年龄组的用户

Question

我正在努力从 TripAdvisor 提取用户信息。

如果您查看评论，单击用户名或照片，它将显示更多信息，即年龄组、贡献、有用的投票和访问过的城市。

我想抓取访问过的年龄组和城市。请查看下面的图片以获取更多详细信息。

我可以点击它，但它只显示第一个用户的信息，它不会移动到第二个用户。我把它放到了for_loop中，但是没有用。

info = browser.find_element_by_class_name('info_text')
info.click()

有人有什么建议可以使用 python 抓取所有用户的信息吗？ 感谢您的时间。

Answer 1

正如@Murthi 建议的那样，尝试循环遍历它应该看起来像：

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC 


data = []
my_xpath = '//div[@class="info_text"]'
wait = WebDriverWait(browser, 10)
wait.until(EC.presence_of_all_elements_located((By.XPATH, my_xpath)))
users_info = browser.find_elements_by_xpath(my_xpath)
for index, user in enumerate(users_info):
    user.click()
    inf = browser.find_elements_by_xpath('//*[@class="countsReviewEnhancementsItem"]')
    data.append(inf)

    try:
        users_info[index+1].click()
    except :
        pass

希望这会有所帮助！