Selenium的简单防反爬和浏览器配置

python 复制代码
# Selenium的简单使用:https://zhuanlan.zhihu.com/p/557463669
# 防反爬参考:https://blog.csdn.net/weixin_51368459/article/details/125462178
from selenium import webdriver
from selenium.webdriver.edge.options import Options


# 设置浏览器驱动位置
service = webdriver.EdgeService(executable_path='./msedgedriver.exe')

# 自定义浏览器选项(常规的防反爬配置)
edge_options = Options()
 # 1. 开启开发者模式
edge_options.add_experimental_option('excludeSwitches', ['enable-automation'])
 # 2. 禁用启用Blink运行时的功能
edge_options.add_argument('--disable-blink-features=AutomationControlled')
# 设置保持浏览器不自动关闭
edge_options.add_experimental_option("detach", True)


# 启动浏览器
driver = webdriver.Edge(service=service, options=edge_options)

# 访问该网站,检测是否防反爬成功
url = "https://intoli.com/blog/not-possible-to-block-chrome-headless/chrome-headless-test.html"
driver.get(url)

-网站可以简单的检测是否成功防止一些基础的反爬,如浏览器驱动是否被检测到启用等,以下出现绿色就说明下面这些防反爬项都是成功的。

相关推荐
devilnumber2 小时前
Oracle 与 MySQL substr 函数差异总结
java·数据库·mysql·oracle
—Miss. Z—2 小时前
计算机等级考试三级数据库技术—选择题
数据库·mysql
www_aiyuanma_vip2 小时前
PC 手机电商(MySQL 版)
数据库·mysql·智能手机
Databend2 小时前
AI 时代的数据工程挑战:从复杂链路走向统一数据底座
大数据·数据库·云计算
treacle田2 小时前
达梦数据库-Linux DM数据守护主备集群缩改为单机-记录总结
linux·服务器·数据库·主备集群改单机
SelectDB技术团队2 小时前
Apache Doris 支持同步/异步物化视图与 ROLLUP,多表加速能力优于 StarRocks
大数据·数据库·doris·技术选型·物化视图·starrock·查询加速
super大力张3 小时前
MOE基于结构的药物设计(七):Ligand R-Vectors——如何判断配体可以从哪里继续生长?
数据库·算法·cadd·moe·svl·基于结构的药物设计
Databend3 小时前
Databend 增量物化视图:基于 Change Tracking 的增量刷新与一致性读取
大数据·数据库·sql