python爬虫之实现edge无头浏览器和规避检测

python爬虫之实现edge无头浏览器和规避检测

爬取百度网页源码但不打开浏览器

实现代码如下:

复制代码
#需求:实现edge无头浏览器和规避检测
from selenium import webdriver
from time import sleep
from selenium.webdriver.edge.options import Options# 实现无可视化界面的操作,

#定义浏览器对象
#实现无可视化界面的操作,无可视化界面(无头浏览器),要用直接复制,加上上面的引入
options = Options()#定义一个option对象
options.add_argument("headless")
#规避检测
options.use_chromium = True
options.add_argument('--disable-blink-features=AutomationControlled')

bro = webdriver.Edge(options=options)

bro.get('https://www.baidu.com/')

print(bro.page_source)
sleep(2)
bro.quit()
相关推荐
M--Y9 小时前
LangGraph 工作流模式
开发语言·javascript·python·langchain·大模型·llm·langgraph
岁月宁静10 小时前
DeepSeek Harness 实战与架构解析:让 Agent 从“会聊”到“能交付”
人工智能·python·agent
LiaoWL12310 小时前
NumPy 入门实战(二):向量化与余弦相似度——从 ndarray 到 Embedding
python·numpy·embedding
forest_0910 小时前
多 Agent 协作第二课:交叉验证≠独立验证
人工智能·python·算法·机器学习·prompt·agi
databook13 小时前
时间序列数据,先拆规律还是先查异常
python·数据挖掘·数据分析
师夷长技以自愈14 小时前
手搓 AI Agent 第 8 篇:从手写循环到画流程图——LangGraph 封装
人工智能·python
aifannihao15 小时前
Rust 1.100 的 DropGuard:用 Python 实测失败回滚与吞异常
python·rust·异常处理·标准库·contextlib
用户0190275816116 小时前
天勤 tqsdk 能做 A 股行情吗?期货强项与股票数据选型
python
wuyk55517 小时前
Spider-第10讲-SQLite持久化与去重
数据库·爬虫·sqlite
2601_9679791218 小时前
pip在Python中的9个必须知道的用法
python·pip·版本控制·包管理工具·requirements.txt