从光滑的 .aspx 页面中抓取

Question

我需要一些可以在网页弹出窗口中看到的值，但至少据我所知，来源是未知的。

页面为：https://www.afpmodelo.cl/AFP/Indicadores/Valor-Cuota.aspx

点击“DESCARGAR EXCEL”按钮后，数据以模态（或类似的形式）出现。

我已经使用 Chrome 开发工具搜索了源和网络 XHR，但找不到数据。

我使用 ruby​​ 和 Mechanize 进行抓取，但怀疑这不是这里的方法。

Answer 1

数据显示在我的网络工具中。右键单击>检查：

以下代码获取该（滑）表：

require 'mechanize'
require 'nokogiri'

url = 'https://www.afpmodelo.cl/AFP/Indicadores/Valor-Cuota.aspx'

mechanize = Mechanize.new { |agent| 
    agent.user_agent_alias = 'Mac Safari'
}

mechanize.get(url).form_with(:id => 'form1') do |form|
    # submit the form using the DESCARGAR EXCEL button
    data_page = form.submit(form.button_with(:id => 'ContentPlaceHolder1_btn_GRILLA'))

    doc = Nokogiri::HTML(data_page.body)
    results_table = doc.css('div.modal-dialog table')

    # do something with the results_table
    puts results_table
end