【发布时间】:2017-06-19 05:47:17
【问题描述】:
我正在制作网页爬虫。 所以我用的是node+nightmare。
我要抓取的网页有“加载更多”按钮。 当我单击此按钮时,会像任何其他网页一样加载更多帖子。
问题是 - 此页面上的帖子数量可能会发生变化。所以我的爬虫应用程序不知道按了多少次“加载更多”按钮。
我知道噩梦中有一个“存在”apu,但我想在条件下重复使用它,而不是一次或固定数字循环。
有什么逻辑我可以使用这种情况吗? 谁来帮帮我T_T
【问题讨论】:
标签: javascript node.js web-crawler nightmare