Python自动化 用电脑模拟人操作浏览器
liuian 2025-09-04 11:51 4 浏览
在日常工作中,手动操作网页任务,比如登录网站、填写表单、抓取数据等,既耗时又容易出错。而Selenium 是一个强大的工具,它可以模拟人类在浏览器中的行为,帮助我们自动化完成这些任务。无论是自动化测试、数据抓取,还是日常办公自动化,Selenium 都能大显身手。
本文将通过具体示例,从零开始,轻松掌握 Selenium 的使用方法。
#01 初识 Selenium
Selenium 是一个用于自动化 Web 测试的工具,但它不仅能用于测试,还能帮助我们自动化各种网页操作。比如可以自动输入文本、点击按钮,甚至处理复杂的验证码,能大大提升我们的工作效率。
安装 Selenium 和浏览器驱动
使用 Selenium 前,需要先安装它和对应的浏览器驱动。
1、安装 Selenium
pip install selenium
2、安装火狐浏览器
使用火狐,当然Chrome浏览器也行的,确保已安装最新版本的火狐浏览器。可以从
https://www.mozilla.org/zh-CN/firefox/all/desktop-release/win64/zh-CN/ 地址下载。
3、下载并配置Geckodriver
Geckodriver是Selenium与火狐浏览器之间的桥梁。可以从https://github.com/mozilla/geckodriver/releases 下载与系统兼容的版本。下载后,将Geckodriver的路径添加到系统的环境变量中,或者在代码中指定路径。
版本兼容性,确保Selenium、Geckodriver和火狐浏览器的版本相互兼容。
#02打开浏览器并访问网页
使用 Selenium 打开浏览器并访问网页。
# -*- coding: utf-8 -*-
from selenium import webdriver
from selenium.webdriver.firefox.service import Service
from selenium.webdriver.common.by import By
from selenium.webdriver.common.keys import Keys
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
gecko_path = 'E:\\1_run_python\\files\\geckodriver.exe'
service = Service(executable_path=gecko_path)
# 创建火狐浏览器实例
driver = webdriver.Firefox(service=service)
try:
# 打开百度
driver.get("https://www.baidu.com")
# 打印当前 URL
print(driver.current_url)
# 定位搜索框并输入文本
input_element = driver.find_element(By.XPATH, "//input[@name='wd']")
input_element.send_keys("Python")
# 模拟按下回车键
input_element.send_keys(Keys.ENTER)
print(driver.current_url)
print(input_element.get_attribute("value")) # Python
# 获取 Cookies
cookies = driver.get_cookies()
print(cookies)
finally:
# 关闭浏览器
# driver.quit()
pass
这段代码会自动打开浏览器,并访问百度首页。
#03定位元素并操作
Selenium 提供了多种方法来定位页面元素,比如通过 ID、名称、XPath 等。
1、通过 ID 定位元素
# 定位搜索框并输入文本
input_element = browser.find_element("id", "kw")
input_element.send_keys("Python")
# 模拟按下回车键
input_element.send_keys(Keys.ENTER)
这里,我们通过 ID 定位到百度的搜索框,输入“Python”,然后模拟按下回车键。
2、通过 XPath 定位元素
可以通过多种方式组合路径表达式,比如通过属性、文本内容或层级关系来定位元素。
假设有一个登录页面,HTML 结构如下
<form>
<input type="text" id="username" name="user" placeholder="Enter username">
<input type="password" id="password" name="pass" placeholder="Enter password">
<button type="submit">Login</button>
</form>
可以使用下面两种分式进行定位。
1、使用 XPath 定位用户名输入框:
//input[@id='username'] 或 //input[@name='user']
2、定位登录按钮:
//button[text()='Login'] 或 //button[contains(text(), 'Login')]
XPath 的强大之处在于它可以根据页面的结构和元素的特征灵活组合表达式,从而实现精准定位。
# 定位按钮并点击
button_element = browser.find_element(By.XPATH, "//input[@name='wd']")
button_element.click()
这里,我们通过 XPath 定位到百度的搜索按钮,并点击它。
#04常用操作示例
1、等待元素加载
在自动化操作中,页面元素可能需要时间加载。Selenium 提供了显式等待和隐式等待机制。下面为显式等待示例:
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
# 设置显式等待
wait = WebDriverWait(browser, 10)
wait.until(EC.presence_of_element_located((By.ID, "aging-tools-pc")))
这段代码会等待页面中 ID 为 aging-tools-pc 的元素加载完成,最多等待 10 秒。如果 10 秒内元素未加载完成,会抛出异常。
2、无头模式运行
如果不需要显示浏览器界面,可以设置无头模式:
options = webdriver.FirefoxOptions()
options.add_argument('--headless')
driver = webdriver.Firefox(service=service, options=options)
3、获取 Cookies 和关闭浏览器
在完成操作后,我们通常需要获取 Cookies 数据,并关闭浏览器。
# 获取 Cookies
cookies = driver.get_cookies()
print(cookies)
# 关闭浏览器
driver.quit()
#05处理登录和验证码
Selenium 可以模拟登录操作,甚至可以处理一些简单的验证码。
1、自动登录
# 打开登录页面
browser.get("https://example.com/login")
# 输入用户名和密码
username_input = browser.find_element("id", "username")
password_input = browser.find_element("id", "password")
username_input.send_keys("your_username")
password_input.send_keys("your_password")
# 点击登录按钮
login_button = browser.find_element("id", "login_button")
login_button.click()
2、处理滑块验证码
from selenium.webdriver import ActionChains
# 定位滑块
slider = browser.find_element("id", "slider")
# 模拟拖动操作
ActionChains(browser).click_and_hold(slider).perform()
ActionChains(browser).move_by_offset(xoffset=300, yoffset=0).release().perform()
通过本文的介绍,知道了如何使用 Selenium 实现自动化操作,包括打开浏览器、定位元素、模拟操作、处理登录和验证码。希望这些示例能帮助你更高效地完成自动化任务。
在实际工作中,你可以根据需要对这些代码进行扩展和优化,以满足更多的需求。
- END-
相关推荐
- PHPMAILER实现PHP发邮件功能php实例
-
这篇文章主要为大家详细介绍了PHPMAILER实现PHP发邮件功能,具有一定的参考价值,感兴趣的小伙伴们可以参考一下本文实例为大家分享了PHPMAILER实现PHP发邮件功能的具体代码,供大家参考,具...
- Cacti监控服务器配置教程(基于CentOS+Nginx+MySQL+PHP环境搭建)
-
具体案例:局域网内有两台主机,一台Linux、一台Windows,现在需要配置一台Cacti监控服务器对这两台主机进行监控环境说明:1、Linux主机操作系统:CentOS6.2IP地址:192.1...
- 如何在webmin中配置多个PHP版本_怎么配置php
-
请关注本头条号,每天坚持更新原创干货技术文章。如需学习视频,请在微信搜索公众号“智传网优”直接开始自助视频学习1.前言如何在webmin中配置多个PHP版本?本教程将会给您一些启示和操作案例。Web...
- 详解Drupal安装步骤_drools安装
-
DrupalDrupal是一个基于PHP语言编写的开源的内容管理系统(CMS:ContentManagementSystem),和Wordpress等CMS一样提供主题。在这里详细介绍一下安装Dr...
- nternet 信息服务(IIS) 升级为IIS 6.0
-
WindowsServer2003中Internet信息服务(IIS)升级为IIS6.0,其安全性更高。默认情况下,WindowsServer2003没有安装IIS6.0,要通过...
- Php JIT 使用详解_php的!
-
简介PHP8引入的JIT(Just-In-Time编译器)是该版本的一个重要性能特性,首次让PHP有了运行时即时编译的能力,从解释型语言迈向了“编译执行”的方向。什么是JIT?JIT...
- php 常见配置详解_php cgi配置
-
以下是PHP常见的配置项及其含义:error_reporting:设置错误报告级别,可以控制PHP显示哪些错误。例如,设置为E_ALL将显示所有错误,而设置为0将禁止显示任何错误。displa...
- 技巧:PHP版本怎样隐藏在Linux服务器
-
通常情况下,大多数安装web服务器软件的默认设置存在信息泄露,这些软件其中之一就是PHP。PHP是如今最流行的服务端html嵌入式语言之一。而在如今这个充满挑战的时代,有许多黑客会尝试发现你服务端的漏...
- PHP八大安全函数解析_php安全设置
-
在现代互联网中,我们经常要从世界各地的用户中获得输入数据。但是,我们都知道“永远不能相信那些用户输入的数据”。所以在各种的Web开发语言中,都会提供保证用户输入数据安全的函数。在PHP中,有些非常有...
- win7下apache+mysql+php安装配置_win7 mysql安装配置教程
-
一.首先下载好要用的apache版本:http://httpd.apache.org/download.cgimysql版本:http://dev.mysql.com/downloads/mys...
- phpmyadmin取消最大文件限制的更改解决方法
-
用phpmyadmin导入大数据库的时候出现:Nodatawasreceivedtoimport.Eithernofilenamewassubmitted,orthefi...
- 成功安装 Magento2.4.3最新版教程「技术干货」
-
外贸独立站设计公司xingbell.com经过多次的反复实验,最新版的magento2.4.3在oneinstack的环境下的详细安装教程如下:一.vps系统:LinuxCentOS7.7.19...
- CentOS、Nginx、PHP、MySQL的安装和配置记录
-
安装LNMP安装wget工具(可选) yuminstall-ywget下载Nginx wgethttp://www.atomicorp.com/installers/ato...
- PHP扩展开发之路(二)_php扩展直接执行php代码
-
昨日,Jamlee发布了PHP扩展开发之路(一),今日再来续集,哈哈,会不会更有趣呢!不说多的,直接来!##0x2helloworld!,你的第一个php扩展##阅读前必看小贴士:如果你不想在本...
- 比较常见类型漏洞讲解(一)_常见漏洞的特点及危害
-
这里介绍一些手动挖掘漏洞时比较容易找到的漏洞,根据不同类型的漏洞来介绍。演示准备目标主机:Metasploitable2攻击目标:目标主机的dvwa系统攻击机:KaliSessionId盗用不知道你们...
- 一周热门
-
-
【验证码逆向专栏】vaptcha 手势验证码逆向分析
-
Python实现人事自动打卡,再也不会被批评
-
Psutil + Flask + Pyecharts + Bootstrap 开发动态可视化系统监控
-
一个解决支持HTML/CSS/JS网页转PDF(高质量)的终极解决方案
-
再见Swagger UI 国人开源了一款超好用的 API 文档生成框架,真香
-
网页转成pdf文件的经验分享 网页转成pdf文件的经验分享怎么弄
-
C++ std::vector 简介
-
飞牛OS入门安装遇到问题,如何解决?
-
系统C盘清理:微信PC端文件清理,扩大C盘可用空间步骤
-
10款高性能NAS丨双十一必看,轻松搞定虚拟机、Docker、软路由
-
- 最近发表
- 标签列表
-
- python判断字典是否为空 (50)
- crontab每周一执行 (48)
- aes和des区别 (43)
- bash脚本和shell脚本的区别 (35)
- canvas库 (33)
- dataframe筛选满足条件的行 (35)
- gitlab日志 (33)
- lua xpcall (36)
- blob转json (33)
- python判断是否在列表中 (34)
- python html转pdf (36)
- 安装指定版本npm (37)
- idea搜索jar包内容 (33)
- css鼠标悬停出现隐藏的文字 (34)
- linux nacos启动命令 (33)
- gitlab 日志 (36)
- adb pull (37)
- python判断元素在不在列表里 (34)
- python 字典删除元素 (34)
- vscode切换git分支 (35)
- python bytes转16进制 (35)
- grep前后几行 (34)
- hashmap转list (35)
- c++ 字符串查找 (35)
- mysql刷新权限 (34)