Ruby Mechanize 提交按钮无法正常工作

Question

我一直在研究一个 Ruby 脚本，它将数据输入到搜索字段中，然后需要单击输入按钮。通过查看“pp”，我的数据正确输入到搜索字段中。我遇到的问题是单击“输入”按钮。正在发生的事情是它没有向前移动它只是刷新当前屏幕。当我通过 IE 手动访问相关网站时，输入搜索数据并在我的键盘上按 Enter，它不会滚动到搜索屏幕；我必须在 enter 上单击鼠标才能使其向前移动。如果我使用 Chrome 并使用键盘输入执行相同的任务，那么它会打开一个新选项卡。我如何以编程方式获得此进展？

这是我的代码：

require 'rubygems'
require 'mechanize'

agent = Mechanize.new
agent.verify_mode = OpenSSL::SSL::VERIFY_NONE
page = agent.get('https://somewebsite.com')

check_form = page.form
check_form['ct100$MainContent$txtNumber'] = 'J520518'

pp page

page = agent.submit(check_form, check_form.buttons.first)

pp page

page.links.each do |link|
  puts link.text
end

这里是输出的片段：

...
<forms
#<Mechanize::Form
<name nil>
<method "POST">
<action "">
<fields
...
[field:0xb627a0 type: name:ct100$MainContent$txtNumber value: J520518]>
...
<buttons
[submit:0xb6d8ac type: submit name: ct100$MainContent$btnEnter value: Enter]
}>}>
...
<forms
#<Mechanize::Form
<name nil>
<method "POST">
<action "">
<fields
...
[field:0xb627a0 type: name:ct100$MainContent$txtNumber value: ]>
...
<buttons
[submit:0xb6d8ac type: submit name: ct100$MainContent$btnEnter value: Enter]

一如既往，非常感谢您的帮助！

Answer 1

好的，因为我使用的是 IE，所以我能够使用 watir 进行解析。然后我可以使用 nokogiri 来解析最后一页。最终，我在上面的代码中走上了正轨，但是 Mechanize 目前无法处理 JavaScript。由于 watir 是浏览器的驱动程序，而不是像它自己的浏览器一样，它能够处理 JavaScript。我希望这对遇到这个问题的人有所帮助。

Answer 2

像这样的 Asp.net 网站对于抓取来说是一个挑战，因为所有内容都有 javascript 回调。您通常可以通过使用 selenium 或 node.js 之类的 js 感知环境来保持理智