“rvest”未使用 html_nodes() 获取产品详细信息

Question

我使用 rvest 在亚马逊的产品搜索 results 上抓取产品的详细信息（名称、价格和可用性）。我能够使用read_html() 获取网页，但我无法获取产品的详细信息（名称、价格和可用性）。该页面具有<span> 标记，其类为class = "a-size-medium a-color-base a-text-normal"。我用过html_nodes("span.a-size-medium a-color-base a-text-normal")，但得到了NA。

这是可重现的代码：

library(rvest)
library(xml2)

url <- "https://www.amazon.in/s?k=Smartphone&rh=n%3A1389401031&ref=nb_sb_noss"

page <- read_html(url)

data <- page%>%
  html_node("span.a-size-medium a-color-base a-text-normal") %>%
  html_text()

print(data)

Answer 1

你只需要稍微改变一下css选择器。我能够得到名称和价格，可用性有点棘手：/

library(rvest)
library(xml2)

url <- "https://www.amazon.in/s?k=Smartphone&rh=n%3A1389401031&ref=nb_sb_noss"

page <- read_html(url)

name <- page %>% html_nodes(".a-size-medium.a-color-base.a-text-normal") %>% html_text()

price <- page %>% html_nodes(".a-price-whole") %>% html_text()