python爬虫之实现edge无头浏览器和规避检测

python爬虫之实现edge无头浏览器和规避检测

爬取百度网页源码但不打开浏览器

实现代码如下:

复制代码
#需求:实现edge无头浏览器和规避检测
from selenium import webdriver
from time import sleep
from selenium.webdriver.edge.options import Options# 实现无可视化界面的操作,

#定义浏览器对象
#实现无可视化界面的操作,无可视化界面(无头浏览器),要用直接复制,加上上面的引入
options = Options()#定义一个option对象
options.add_argument("headless")
#规避检测
options.use_chromium = True
options.add_argument('--disable-blink-features=AutomationControlled')

bro = webdriver.Edge(options=options)

bro.get('https://www.baidu.com/')

print(bro.page_source)
sleep(2)
bro.quit()
相关推荐
橘子编程21 小时前
GoF 23 种设计模式完整知识总结与使用教程
java·c语言·开发语言·python·设计模式
枫叶林FYL21 小时前
【Python高级工程与架构实战】项目五:生产级LLM Agent框架:基于PydanticAI的类型安全企业级实现
python·安全·架构
ths51221 小时前
Python 正则表达式学习笔记(小白超详细版)(一)
python·正则表达式
飞Link21 小时前
pprint 全量技术手册:复杂数据结构的结构化输出引擎
开发语言·前端·python
培风图南以星河揽胜21 小时前
幻想简历!博主本人期望的 AI Agent 全栈简历:Java + Python + Vue3 跨语言实战,代码已开源!
java·人工智能·python
第一程序员21 小时前
Python函数式编程:非科班转码者的入门指南
python·github
蓝色的杯子21 小时前
龙虾-OpenClaw一文详细了解-手搓OpenClaw-2 Provider层
人工智能·python
AI_Claude_code21 小时前
ZLibrary访问困境方案二:DNS-over-HTTPS/TLS配置与隐私保护实践
爬虫·python·网络协议·http·网络安全·https·网络爬虫
至此流年莫相忘21 小时前
数据库迁移工具——Alembic
python
Dxy123931021621 小时前
Python有哪些方法可以进行文本纠错
开发语言·python