Jsoup 不读取/加载整个页面

Question

http://www.missouribotanicalgarden.org/PlantFinder/PlantFinderListResults.aspx?letter=A

jsoup 读取页面后，似乎稍后加载了一些内容？ doc.html() 中没有“Abelia chinensis”或列表中没有任何其他元素

Document doc = Jsoup.connect("http://www.missouribotanicalgarden.org/PlantFinder/PlantFinderListResults.aspx?letter=A")
        .header("Accept-Encoding", "gzip, deflate")
        .userAgent("Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/535.21 (KHTML, like Gecko) Chrome/19.0.1042.0 Safari/535.21")
        .ignoreContentType(true)               
        .ignoreHttpErrors(true)
        .followRedirects(true)
        .timeout(600000)
        .maxBodySize(0)/*unlimited body size*/
        .get();  

    responseBody =  doc.html();

Answer 1

Abelia chinensis 在那里，但您可能错过了它，因为 HTML 是这样构建的：

<i>Abelia</i> <i>chinensis</i>

使用名称选择每个链接：

Elements links = doc.select("a[id^=MainContentPlaceHolder_SearchResultsList_TaxonName_]");

这意味着选择每个<a>，id以MainContentPlaceHolder_SearchResultsList_TaxonName_开头。它恰好选择了 821 个结果。