使用git lfs向huggingface提交较大的数据或者权重

1、克隆以及建立好的项目(最好使用ssh进行克隆)

git clone git@hf.co:datasets/****/xxxx

2、安装 git-lfs

sudo apt-get install git-lfs

3、在仓库中初始化git lfs

git lfs install

4、跟踪文件

git lfs track "video/*.mp4"

注意："video/*.mp4"是需要根据的目录地址和类型。在我的项目中有一个video文件目录存放这xxx.mp4数据。这将创建或更新一个名为 .gitattributes 的文件，指定哪些文件由 Git LFS 管理。

5、添加并提交

git add .
git commit -m "提交"
git push origin main

5、其他技巧

• 清除跟踪

  git lfs untrack "*.mp4"

• 查看是否被 LFS 跟踪
  推送后，您可以通过以下命令检查 .mp4 文件是否被 LFS 跟踪

  git lfs ls-files