华为服务器obsutil使用方法

本文不生产技术,只做技术的搬运工!!!

前言

最近在使用华为云服务器进行模型训练,发现其上传下载文件都极慢,询问华为官方人员是否限速,对方推荐使用obsutil作为中转服务进行下载,在这里简单进行操作记录。

服务开通

该服务是需要在modelarts里进行订购的

点击开通服务即可(需要花钱,我不是销售也没有广告费)

获取密钥

开通服务后右上角有个访问密钥,单击这里生成密钥,注意密钥生成后只能下载一次,请妥善保存

ObsUtil下载

华为服务器为arm架构,下载链接为:https://obsbrowser.obs.qdrgznjszx.com/obsutil_hcso_linux_arm64_5.3.4.tar.gzhttps://obsbrowser.obs.qdrgznjszx.com/obsutil_hcso_linux_arm64_5.3.4.tar.gz

我的本机为amd64的ubuntu20.04,下载链接为:https://obs-community.obs.cn-north-1.myhuaweicloud.com/obsutil/current/obsutil_linux_amd64.tar.gzhttps://obs-community.obs.cn-north-1.myhuaweicloud.com/obsutil/current/obsutil_linux_amd64.tar.gzwindows客户端下载请参考百度

ObsUtil安装

该软件下载完成后不需要安装,直接解压即可(本地端和服务器端都要安装),解压完成后内容如下图所示:

执行以下命令修改执行权限

bash 复制代码
sudo chmod 777 obsutil

ObsUtil配置

在解压出的可执行文件所在的文件夹打开终端(本地端和服务器端都要配置),执行以下命令

bash 复制代码
./obsutil config -interactive

依次输入以下内容,注意token不需要输入,直接回车即可,SK和AK为刚才生成的密钥,下载到本地为一个CSV文件,里面有这两项

ObsUtil桶创建

这里作者是使用华为云服务页面创建的,点击红色框会自动调转页面,然后点击创建桶即可

创建完成后,可以在本地端或者服务器端执行以下命令查看桶

bash 复制代码
./obsutil ls

ObsUtil上传与下载

上传文件夹

bash 复制代码
./obsutil cp your_folder_path obs://your_bucket_name -r -f

下载文件夹

bash 复制代码
./obsutil cp obs://your_bucket_name your_folder_name -r -f

其余操作

参考:https://docs.qdrgznjszx.com/zh-cn/utiltg/obs/obs_11_0018.htmlhttps://docs.qdrgznjszx.com/zh-cn/utiltg/obs/obs_11_0018.html

相关推荐
海鸥_5 分钟前
深度学习调试记录
人工智能·深度学习
搞科研的小刘选手14 分钟前
【学术会议合集】2025-2026年地球科学/遥感方向会议征稿信息
大数据·前端·人工智能·自动化·制造·地球科学·遥感测绘
烦躁的大鼻嘎25 分钟前
【Linux】深入探索多线程编程:从互斥锁到高性能线程池实战
linux·运维·服务器·开发语言·c++·算法·ubuntu
lingliang35 分钟前
机器学习之三大学习范式:监督学习、无监督学习、强化学习
人工智能·学习·机器学习
没有口袋啦1 小时前
《决策树、随机森林与模型调优》
人工智能·算法·决策树·随机森林·机器学习
计育韬1 小时前
计育韬:基于AI的数据可视化设计入门工作流
人工智能·信息可视化·新媒体运营·微信公众平台
倔强青铜三1 小时前
苦练Python第58天:filecmp模块——文件和目录“找不同”的利器
人工智能·python·面试
倔强青铜三1 小时前
苦练Python第59天:tempfile模块,临时文件自动删!再也不用手动清理到怀疑人生
人工智能·python·面试
stjiejieto1 小时前
AI 重构实体经济:2025 传统产业的智能转型革命
人工智能·重构
彩旗工作室1 小时前
用 Supabase 打造统一认证中心:为多应用提供单点登录(SSO)
服务器·前端·数据库