python爬虫之实现edge无头浏览器和规避检测

python爬虫之实现edge无头浏览器和规避检测

爬取百度网页源码但不打开浏览器

实现代码如下:

复制代码
#需求:实现edge无头浏览器和规避检测
from selenium import webdriver
from time import sleep
from selenium.webdriver.edge.options import Options# 实现无可视化界面的操作,

#定义浏览器对象
#实现无可视化界面的操作,无可视化界面(无头浏览器),要用直接复制,加上上面的引入
options = Options()#定义一个option对象
options.add_argument("headless")
#规避检测
options.use_chromium = True
options.add_argument('--disable-blink-features=AutomationControlled')

bro = webdriver.Edge(options=options)

bro.get('https://www.baidu.com/')

print(bro.page_source)
sleep(2)
bro.quit()
相关推荐
爱吃提升20 分钟前
如何使用量化工具对模型进行量化优化?
python
wang_yb1 小时前
你真的会用 Python 的 print 吗?
python·databook
筱昕~呀2 小时前
基于深度生成对抗网络的智能实时美妆设计
人工智能·python·生成对抗网络·mediapipe·beautygan
企业对冲系统官2 小时前
期货与期权一体化平台风险收益评估方法与模型实现
运维·服务器·开发语言·数据库·python·自动化
cuckooman2 小时前
uv设置国内源
python·pip·uv·镜像源
一见2 小时前
如何安装 dlib 和 OpenCV(不带 Python 绑定)
人工智能·python·opencv
刘晓倩3 小时前
Python内置函数-hasattr()
前端·javascript·python
逆境清醒3 小时前
Python中的常量
开发语言·python·青少年编程
SEO_juper3 小时前
精准控制爬虫抓取:Robots.txt 核心配置解析与常见避坑指南
人工智能·爬虫·seo·数字营销
紫小米3 小时前
MCP协议与实践
python·llm·mcp协议