python爬虫之实现edge无头浏览器和规避检测

python爬虫之实现edge无头浏览器和规避检测

爬取百度网页源码但不打开浏览器

实现代码如下:

复制代码
#需求:实现edge无头浏览器和规避检测
from selenium import webdriver
from time import sleep
from selenium.webdriver.edge.options import Options# 实现无可视化界面的操作,

#定义浏览器对象
#实现无可视化界面的操作,无可视化界面(无头浏览器),要用直接复制,加上上面的引入
options = Options()#定义一个option对象
options.add_argument("headless")
#规避检测
options.use_chromium = True
options.add_argument('--disable-blink-features=AutomationControlled')

bro = webdriver.Edge(options=options)

bro.get('https://www.baidu.com/')

print(bro.page_source)
sleep(2)
bro.quit()
相关推荐
学历真的很重要21 小时前
LangChain V1.0 Short-term Memory 详细指南
后端·python·语言模型·面试·langchain·agent·ai编程
interception1 天前
爬虫逆向:国家信息安全漏洞(加速乐),cookie反爬
爬虫
LitchiCheng1 天前
Mujoco 基础:获取模型中所有 body 的 name, id 以及位姿
人工智能·python
老鱼说AI1 天前
算法基础教学第一步:数据结构
数据结构·python·算法
2301_795167201 天前
Python 高手编程系列八:缓存
开发语言·python·缓存
闲人编程1 天前
Django测试框架深度使用:Factory Boy与Fixture对比
数据库·python·django·sqlite·钩子·fixture·codecapsule
梅花141 天前
基于Django房屋租赁系统
后端·python·django·bootstrap·django项目·django网站
今天没有盐1 天前
Python数据分析实战:从超市销售到教学评估
python·pycharm·编程语言
s***87271 天前
Vllm进行Qwen2-vl部署(包含单卡多卡部署及爬虫请求)
爬虫
white-persist1 天前
【攻防世界】reverse | IgniteMe 详细题解 WP
c语言·汇编·数据结构·c++·python·算法·网络安全