python中的selenium實現自動向下滾動頁面並指定最大滑動距離

需要selenium控制的chrome向下滑動,自動加載一些內容,核心代碼是:

browser.execute_script("window.scrollBy(0,300)")

這行可以向下滑動300個像素

需要的工具函數如下:

def roll_window_to_bottom(browser, stop_length=None, step_length=500):
    """selenium 滾動當前頁面,向下滑
    :param browser: selenium的webdriver
    :param stop_length: 滑動的最大值
    :param step_length: 每次滑動的值
    """
    original_top = 0
    while True:  # 循環向下滑動
        if stop_length:
            if stop_length - step_length < 0:
                browser.execute_script("window.scrollBy(0,{})".format(stop_length))
                break
            stop_length -= step_length
        browser.execute_script("window.scrollBy(0,{})".format(step_length))
        time.sleep(0.5 + random.random())  # 停頓一下
        check_height = browser.execute_script(
            "return document.documentElement.scrollTop || window.pageYOffset || document.body.scrollTop;")
        if check_height == original_top:  # 判斷滑動後距頂部的距離與滑動前距頂部的距離
            break
        original_top = check_height

使用示例:

from selenium import webdriver
import time
import random


def roll_window_to_bottom(browser, stop_length=None, step_length=500):
    """selenium 滾動當前頁面,向下滑
    :param browser: selenium的webdriver
    :param stop_length: 滑動的最大值
    :param step_length: 每次滑動的值
    """
    original_top = 0
    while True:  # 循環向下滑動
        if stop_length:
            if stop_length - step_length < 0:
                browser.execute_script("window.scrollBy(0,{})".format(stop_length))
                break
            stop_length -= step_length

        browser.execute_script("window.scrollBy(0,{})".format(step_length))
        time.sleep(0.5 + random.random())  # 停頓一下
        check_height = browser.execute_script(
            "return document.documentElement.scrollTop || window.pageYOffset || document.body.scrollTop;")
        if check_height == original_top:  # 判斷滑動後距頂部的距離與滑動前距頂部的距離
            break
        original_top = check_height


def main():
    option = webdriver.ChromeOptions()
    option.add_argument('lang=zh_CN.UTF-8')  # 設置
    browser = webdriver.Chrome(chrome_options=option, desired_capabilities={"page_load_strategy": "none"})
    browser.get("http://news.baidu.com/")
    roll_window_to_bottom(browser, stop_length=700)


if __name__ == '__main__':
    main()

到此這篇關於python中的selenium實現自動向下滾動頁面並指定最大滑動距離的文章就介紹到這瞭,更多相關selenium實現自動向下滾動頁面並指定最大滑動距離內容請搜索WalkonNet以前的文章或繼續瀏覽下面的相關文章希望大傢以後多多支持WalkonNet!

推薦閱讀: