【问题标题】:Read values in dropdown menu element with RSelenium使用 RSelenium 读取下拉菜单元素中的值
【发布时间】:2015-10-15 11:49:11
【问题描述】:

我正在使用 RSelenium 导航到站点并与元素交互。

问题:使用 RSelenium,我如何阅读下拉菜单中的选项列表,以便识别可用的最新月份并使用它来将下拉菜单设置为正确的值? p>

a certain site 上,为用户提供了一个下拉菜单来设置一年中的月份,从而定义了一个日期范围的终点,该日期范围又用于显示或下载每月数据。随着全年有更多月份的数据可用,下拉列表中的选项会发生变化。

到 7 月底,下拉菜单将有 6 个选项,从 1 月到 6 月。请注意,特定月份的数据会在该月结束后的大约 4-6 周发布,因此您要到 7 月下旬才能获得 6 月的数据,依此类推。我可以使用数字 1 到 12 毫无问题地设置值,前提是下拉菜单实际上包含相应的选项。

例如,如果 7 月的数据尚未发布(即,如果 7 月尚未出现在选项下拉列表中)并且如果我尝试将下拉列表设置为“7”,我将得到一个错误,我想避免。数据不会定期出现,所以我不能简单地假设 X 月的数据会出现在 Y 日。

我相信 Selenium 本身有 a helper class 可用,但我不确定我是否可以通过 RSelenium 访问它。

示例代码如下 - 可能有点啰嗦,因为我对这个包还很不熟悉。

library(RSelenium)
RSelenium::checkForServer()
RSelenium::startServer()

remDr <- remoteDriver(remoteServerAddr = "localhost",
                      port = 4444,
                      browserName = "firefox"
                      )
remDr <- remoteDriver()
Sys.sleep(5)
remDr$open()
remDr$getStatus()

remDr$navigate("http://jamaserv.jama.or.jp/newdb/eng/index.html")

## Switch to left frame
frameElems <- remDr$findElements(using = "tag name", "frame")
sapply(frameElems, function(x){x$getElementAttribute("src")})
remDr$switchToFrame(frameElems[[1]])

webElem <- remDr$findElement(using = 'xpath', "//select[@name='txtTargetToMm']")

## Use javascript to set values
script <- paste0("arguments[0].value = '", 2, "'; arguments[0].onchange();") # set to February
remDr$executeScript(script, list(webElem))
webElem$getElementAttribute('value')    # check to see if it worked

【问题讨论】:

  • 有时我喜欢直接从开发控制台中提取 curl 请求,然后将其包装在 system 中。它不漂亮,但它几乎总是有效。打开控制台,切换到网络选项卡,执行操作,右键单击包含数据的元素,复制为 curl。
  • 谢谢你;有趣的提示。

标签: r selenium web-scraping rselenium


【解决方案1】:

您可以使用selectTag 方法与HTML select 元素进行交互:

library(RSelenium)

rD <- rsDriver(verbose = F)
remDr <- rD$client
remDr$navigate("http://jamaserv.jama.or.jp/newdb/eng/index.html")

## Switch to left frame
frameElems <- remDr$findElements(using = "tag name", "frame")
sapply(frameElems, function(x){x$getElementAttribute("src")})
remDr$switchToFrame(frameElems[[1]])

webElem <- remDr$findElement(using = 'xpath', "//select[@name='txtTargetToMm']")
opts <- webElem$selectTag()

> opts$text
[1] "JANUARY"   "FEBRUARY"  "MARCH"     "APRIL"     "MAY"       "JUNE"      "JULY"      "AUGUST"   
[9] "SEPTEMBER" "OCTOBER"   "NOVEMBER"  "DECEMBER" 
> opts$value
[1] "1"  "2"  "3"  "4"  "5"  "6"  "7"  "8"  "9"  "10" "11" "12"
> opts$selected
[1] FALSE FALSE FALSE FALSE FALSE FALSE FALSE FALSE FALSE FALSE FALSE  TRUE

# select the third month (march)
opts$elements[[3]]$clickElement()

# check whether it is selected
opts <- webElem$selectTag()
opts$selected

> opts$selected
[1] FALSE FALSE  TRUE FALSE FALSE FALSE FALSE FALSE FALSE FALSE FALSE FALSE

rm(rD)
gc()

【讨论】:

  • 如果我尝试运行您的代码,但在尝试执行opts$elements[[3]]$clickElement() 时收到错误Error: attempt to apply non-function
猜你喜欢
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 1970-01-01
  • 2012-09-05
相关资源
最近更新 更多