Python实现一键从Gitlab上拉取文件夹下多个项目代码到本地

公司Gitlab上有一个项目文件夹,下面有20多个Git项目,要把它们一个个拉取下来比较费时,所以用Python写了一个脚本。

脚本代码

python 复制代码
import requests
from git import Repo
import os

# GitLab地址
gitlab = "https://xxxx/api/v4/projects"

# token,在GitLab上面申请Access Token得到
token = "xxxx"

# 分页参数,一次性干他妈的50个,绝对查完
page = 1
per_page = 50

# 最后请求的url
url = "{}?private_token={}&page={}&per_page={}".format(gitlab, token, page, per_page)

# 项目存放地址
parentPath = "D:\\Projects\\MyPAth"

# 拉取代码后要切换的分支,是master就不用切换了
branch = "master"

def requestGitProjects():
    # 请求
    response = requests.get(url)

    # 记录每个项目文件夹下的项目数量,最后判断对不对
    backendCount = 0
    frameworkCount = 0
    mockCount = 0
    if response.status_code == 200:
        projects = response.json()
        for project in projects:
            # 得到git地址
            http_url = project["http_url_to_repo"]
            # 得到git项目名称
            name = project["path"]
            print(http_url)
            path = parentPath + "\\" + name
            # 去做Git操作
            gitPull(http_url, path)
        print("解析完成。")
    else:
        print("请求失败:", response.status_code)


def gitPull(gitUrl, path):
    if os.path.exists(path):
        print("文件夹已存在,跳过:", path)
        return
    # 拉代码和切换分支,异常说明没有内容或者没有分支,那就不管了
    try:
        repo = Repo.clone_from(gitUrl, path)
        if "master" != branch:
            repo.git.checkout(branch)
    except Exception as e:
        pass


# 执行代码
requestGitProjects()

Python环境准备

shell 复制代码
# 脚本代码路径
cd xxx

# 创建虚拟环境
python -m venv venv

# 激活虚拟环境,此处为Windows系统,如果是Linux则是二进制文件
\venv\Scripts\activate.bat

# 激活后则进入虚拟环境,安装所需要的依赖
(venv) pip install requests
(venv) pip install gitpython

# 运行代码
(venv) python demo.py
相关推荐
小江的记录本2 分钟前
【RAG】RAG检索增强生成(核心架构、全流程、RAG优化方案、常见问题与解决方案)
java·前端·人工智能·后端·python·机器学习·架构
迷藏4945 分钟前
**TiDB 在高并发场景下的性能优化实战:从慢查询到极致吞吐的跃迁**在现代分布式系统中,数据库不仅是数据存储的
java·数据库·python·性能优化·tidb
m0_678485455 分钟前
如何自动同步SQL异构表数据_利用触发器实现实时数据复制
jvm·数据库·python
ZC跨境爬虫12 分钟前
海南大学交友平台登录页开发实战day6(覆写接口+Flask 本地链接正常访问)
前端·后端·python·flask·html
Shorasul14 分钟前
如何防御SQL注入的SQL畸形查询_利用语法分析器检测
jvm·数据库·python
WHS-_-202217 分钟前
Pycharm 使用经验
ide·python·pycharm
花椒技术18 分钟前
从 1.5 秒到 660ms,直播间首屏秒开是怎么做出来的?
人工智能·后端·全栈
Rust研习社39 分钟前
深入 Rust 引用计数智能指针:Rc 与 Arc 从入门到实战
开发语言·后端·rust
m0_6403093040 分钟前
c++如何判断两个文件路径是否物理指向同一个磁盘文件_equivalent【详解】
jvm·数据库·python
树獭叔叔44 分钟前
OpenCLI:让任何网站成为你的命令行工具
后端·aigc·openai