python中的selenium实现自动向下滚动页面并指定最大滑动距离
作者:呆萌的代Ma 发布时间:2021-09-04 20:44:03
标签:python,selenium,滚动页面,滑动距离
需要selenium控制的chrome向下滑动,自动加载一些内容,核心代码是:
browser.execute_script("window.scrollBy(0,300)")
这行可以向下滑动300个像素
需要的工具函数如下:
def roll_window_to_bottom(browser, stop_length=None, step_length=500):
? ? """selenium 滚动当前页面,向下滑
? ? :param browser: selenium的webdriver
? ? :param stop_length: 滑动的最大值
? ? :param step_length: 每次滑动的值
? ? """
? ? original_top = 0
? ? while True: ?# 循环向下滑动
? ? ? ? if stop_length:
? ? ? ? ? ? if stop_length - step_length < 0:
? ? ? ? ? ? ? ? browser.execute_script("window.scrollBy(0,{})".format(stop_length))
? ? ? ? ? ? ? ? break
? ? ? ? ? ? stop_length -= step_length
? ? ? ? browser.execute_script("window.scrollBy(0,{})".format(step_length))
? ? ? ? time.sleep(0.5 + random.random()) ?# 停顿一下
? ? ? ? check_height = browser.execute_script(
? ? ? ? ? ? "return document.documentElement.scrollTop || window.pageYOffset || document.body.scrollTop;")
? ? ? ? if check_height == original_top: ?# 判断滑动后距顶部的距离与滑动前距顶部的距离
? ? ? ? ? ? break
? ? ? ? original_top = check_height
使用示例:
from selenium import webdriver
import time
import random
def roll_window_to_bottom(browser, stop_length=None, step_length=500):
? ? """selenium 滚动当前页面,向下滑
? ? :param browser: selenium的webdriver
? ? :param stop_length: 滑动的最大值
? ? :param step_length: 每次滑动的值
? ? """
? ? original_top = 0
? ? while True: ?# 循环向下滑动
? ? ? ? if stop_length:
? ? ? ? ? ? if stop_length - step_length < 0:
? ? ? ? ? ? ? ? browser.execute_script("window.scrollBy(0,{})".format(stop_length))
? ? ? ? ? ? ? ? break
? ? ? ? ? ? stop_length -= step_length
? ? ? ? browser.execute_script("window.scrollBy(0,{})".format(step_length))
? ? ? ? time.sleep(0.5 + random.random()) ?# 停顿一下
? ? ? ? check_height = browser.execute_script(
? ? ? ? ? ? "return document.documentElement.scrollTop || window.pageYOffset || document.body.scrollTop;")
? ? ? ? if check_height == original_top: ?# 判断滑动后距顶部的距离与滑动前距顶部的距离
? ? ? ? ? ? break
? ? ? ? original_top = check_height
def main():
? ? option = webdriver.ChromeOptions()
? ? option.add_argument('lang=zh_CN.UTF-8') ?# 设置
? ? browser = webdriver.Chrome(chrome_options=option, desired_capabilities={"page_load_strategy": "none"})
? ? browser.get("http://news.baidu.com/")
? ? roll_window_to_bottom(browser, stop_length=700)
if __name__ == '__main__':
? ? main()
来源:https://blog.csdn.net/weixin_35757704/article/details/122763602


猜你喜欢
- 下面是Sql Server 和 Access 操作数据库结构的常用Sql,希望对你有所帮助。内容由海娃整理,不正确与不完整之处还请提出,谢谢
- 去空格函数有如下两种:·LTRIM()LTRIM() 函数把字符串头部(左)的空格去掉,其语法如下:LTRIM (<character
- 茎叶图from itertools import groupbynums2=[225, 232,232,245,235,245,270,22
- 基本介绍环境: Python 3.5+, Pytorch 0.4.1/1.0.0安装:pip install pytorch-pretrai
- 一、视图的基本概念视图是用于查询的另外一种方式。 与实际的表不同,它是一个虚表;因此数据库中只存在视图的定义,而不存在视图中相对应的数据,数
- 一、主线程会等待所有的子线程结束后才结束首先我看下最普通情况下,主线程和子线程的情况。import threadingfrom time i
- 无论是在小得可怜的免费数据库空间或是大型电子商务网站,合理的设计表结构、充分利用空间是十分必要的。这就要求我们对数据库系统的常用MySQL数
- 老声长谈,着是困惑很多人的问题,如果处理不好,都是乱码,说这些话并不是我对编码很精通,只是在这方面是得留神,自己总结了一点小经验(容易出现乱
- 1、<DIV id=div1><h1>This is an DIV</h1></div> &
- 关于电脑的垃圾清理操作,已经有很多的成熟的软件可以帮助我们完成C盘的垃圾清理操作,比如360等等。但是使用三方的清理软件往往伴随着很多的广告
- 理科学生应该都了解过共轭吧,经常在数学或者物理还有化学中出现,在坐标轴上去描述共轭函数还是比较清晰的,py语言里也经常会出现关于共轭函数的使
- 前言我们在 django-rest-framework解析请求参数 文章中完成了接口文档到参数解析, 一个完整的流程中还
- 本文实例讲述了Python实现随机生成手机号及正则验证手机号的方法。分享给大家供大家参考,具体如下:依据根据2017年10月份最新的手机号正
- 1:使用SHOW语句找出在服务器上当前存在什么数据库:mysql> SHOW DATABASES;2:2、创建一个数据库MYSQLDA
- 需求:查询表dbo.Message,每页10条,查询第2页1:TOP()SELECT TOP(20) * FROM dbo.Message
- 一、创建矩阵的方法import numpy as np# 1直接创建mat=np.mat("1 2 3;4 5 6;7 8 9&q
- 一、导出数据。 先说明一下自己的环境:Mac OS X 10.8.3, MySQL Community Server 5.6.10, MyS
- Gmail 作为一个经典的 Web 2.0 应用,在带来革命性的邮件管理体验的同时,以其完整、快速的 AJAX 操作方式,深受用户的推崇和技
- python读文件操作1. read三种不同的方式f = open('hello.txt') #'hello.txt
- PYTHON首先要安装scapy模块PY3的安装scapy-python3,使用PIP安装就好了,注意,PY3无法使用pyinstaller