【python】docker-selenium 分布式selenium模拟浏览器 |可视化 或 后台运行selenium 部署与使用

一、分布式selenium

1、部署 docker-selenium

Github官方地址如下:
https://github.com/SeleniumHQ/docker-selenium?tab=readme-ov-file

执行安装指令:

1、这里可以将dashboard映射接口改为 14444(记得开放安全组)

bash 复制代码
docker run --rm -it -p 14444:4444 -p 7900:7900 --shm-size 2g selenium/standalone-chrome

2、UI界面

访问网址:

1、这里映射的是14444端口

html 复制代码
http://127.0.0.1:14444/ui/

点击 《Session》tabs

点击摄像头按钮

默认密码:secret

可以看到模拟浏览器正在运行的效果

3、编程调用 docker-selenium

bash 复制代码
def login_get_cookie():
    # 配置浏览器选项
    chrome_options = webdriver.ChromeOptions()
    chrome_options.add_argument('--no-sandbox')
    chrome_options.add_argument('--disable-dev-shm-usage')

    # 连接到远程Selenium Chrome节点
    browser = webdriver.Remote("http://127.0.0.1:14444", options=chrome_options)

    try:
        browser.get("https://xxbb.com/Account/Login")
        # 输出网页标题
        print(browser.title)
        account_name = '123'
        passward = '456'
        # 找到用户名和密码输入框,并模拟输入账号密码(请替换为实际的元素定位方式)
        # driver.find_element(By.ID,"validemail2").send_keys(account_name)
        print("Waiting for element to be clickable...")
        element = WebDriverWait(browser, 20).until(
            EC.element_to_be_clickable((By.CSS_SELECTOR, '[id="validemail2"]'))
        )
        element.send_keys(account_name)
        # print(browser.page_source)
        print("Element is clickable.")
        print("---------------获取到元素准备登录")
        browser.find_element(By.XPATH, '/html/body/div[1]/div/div/div/div[2]/div/form/div[2]/input').send_keys(passward)
        browser.find_element(By.ID, "button").click()

        # # 提交登录表单(如果需要点击登录按钮的话)
        # login_button = driver.find_element_by_css_selector('input[type="submit"]')  # 或其他定位方式
        # login_button.click()

        # 等待页面加载完成(如果需要的话,可以使用WebDriverWait配合expected_conditions进行等待)
        # ...
        # print("----------", browser.get_cookies())
        # 获取当前页面的所有Cookie
        cookies = browser.get_cookies()
        # print(cookies)
        # 初始化一个空字符串,用于存储拼接后的cookie字符串
        cookie_string = ""
        for cookie in cookies:
            print(f"Name: {cookie['name']}, Value: {cookie['value']}")
            # 将每个cookie的name和value拼接成形如"name=value"的格式,并添加到cookie_string中
            cookie_string += f"{cookie['name']}={cookie['value']};"
            # 去除最后一个分号
        cookie_string = cookie_string[:-1]
        return cookie_string
    finally:
        browser.quit()
相关推荐
玩电脑的辣条哥24 分钟前
一台服务器已经有个python3.11版本了,如何手动安装 Python 3.10,两个版本共存
服务器·python·python3.11
大米☋26 分钟前
Docker-高级使用
linux·运维·docker·容器·centos
weixin_3077791330 分钟前
PySpark实现ABC_manage_channel逻辑
开发语言·python·spark
海天一色y1 小时前
Pycharm(十六)面向对象进阶
ide·python·pycharm
??? Meggie1 小时前
【Python】保持Selenium稳定爬取的方法(防检测策略)
开发语言·python·selenium
XIE3922 小时前
Browser-use使用教程
python
酷爱码3 小时前
如何通过python连接hive,并对里面的表进行增删改查操作
开发语言·hive·python
蹦蹦跳跳真可爱5893 小时前
Python----深度学习(基于深度学习Pytroch簇分类,圆环分类,月牙分类)
人工智能·pytorch·python·深度学习·分类
MinggeQingchun6 小时前
Python - 爬虫-网页解析数据-库lxml(支持XPath)
爬虫·python·xpath·lxml
Anarkh_Lee7 小时前
Neo4j在win下安装教程(docker环境)
docker·容器·neo4j