Scrape Ebay 使用 Rvest 出售商品答案

【问题标题】：Scrape Ebay sold listings using RvestScrape Ebay 使用 Rvest 出售商品
【发布时间】：2021-02-05 16:03:25
【问题描述】：

我正在尝试从 ebay 出售的列表中提取信息（列表标题、价格、出价数量、日期、时间、卖家评论数量）

我遇到了问题并收到错误消息，我在 Google 上看不到任何内容：

url <- "https://www.ebay.com/sch/i.html?_from=R40&_nkw=kobe+bryant+rookie+card&_in_kw=1&_ex_kw=&_sacat=0&LH_Sold=1&_udlo=&_udhi=&LH_Auction=1&_samilow=&_samihi=&_sadis=15&_stpos=92653&_sargn=-1%26saslc%3D1&_salic=1&_sop=12&_dmd=1&_ipg=50&LH_Complete=1&_fosrp=1"

webpage <- url %>% read_html()

我收到以下错误 readBin(11L, "raw", 65536L) 出错：写入数据失败

任何将 r 连接到 url 的指导，以便我可以从那里找出它会有所帮助！

【问题讨论】：

标签： r web-scraping rvest

【解决方案1】：

您可以使用 RSelenium 来解决您的 url 问题。

以下可能的解决方案。

library(rvest)
library(RSelenium)
driver <- rsDriver(browser= 'firefox', port = 4551L)
remote_driver <- driver[["client"]] 
remote_driver$navigate(url)
webpage <- remote_driver$getPageSource() %>% unlist() %>% read_html()

【讨论】：