phantomjs 不使用 window.scollTo 向下滚动

Question

所以我使用 selenium/phantomjs 中最基本的方式来执行向下滚动操作。 它似乎在代码中都很好，但不起作用。 我尝试打印“document.body.scrollHeight”，每次滚动后它都保持不变。 （例如高度保持在 10532）

我正在浏览某个人的推特页面，例如“twitter.com/XXXXX”

谁能给我提示一下我可以在这里做什么？

我使用的 webdriver 是 phantomjs

代码如下：

def getfullpage(url):
    print "getting fullpage..."
    driver.get(url)
    time.sleep(2)
    reloads = 3000
    pause = 0
    driver.save_screenshot("what'shappening.jpg")
    for times in range(reloads):
        driver.execute_script("window.scrollTo(0,document.body.scrollHeight);")
        time.sleep(pause)
        newheight = driver.execute_script("return document.body.scrollHeight")
        print newheight
    page = driver.page_source.encode("utf-8","ignore")
    return page

Answer 1

我会等待滚动高度增加并改用document.documentElement.scrollHeight：

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.support.ui import WebDriverWait

driver = webdriver.PhantomJS()
wait = WebDriverWait(driver, 20)

driver.get("https://twitter.com/barackobama")
time.sleep(1)

# scroll the height
height = driver.execute_script("var h=document.documentElement.scrollHeight; window.scrollTo(0, h); return h;")

# wait for the scroll height to increase
wait.until(lambda drv: drv.execute_script("return document.documentElement.scrollHeight;") > height)

# display the final scroll height
print driver.execute_script("return document.documentElement.scrollHeight;")