交换空间扩容与删除、hugginface更换默认目录、ffmpeg视频处理、清理空间

目录

相当于记录一下工作笔记吧。

swap 空间扩容

swap空间还是有用的,有时候会通过内存处理这样的数据量,比如通过内存来处理数据集(并行)此时32G的内存可能很亏就没有了,而swap空间也可能占满。

首先是swap空间的创建:

bash 复制代码
# 1. 切换到 /tmp 目录(确保路径正确)
cd /tmp

# 2. 创建 15GB swap 文件(dd 命令兼容性最好,带进度显示)
sudo dd if=/dev/zero of=/tmp/swap_temp bs=1G count=15 status=progress

# 3. 设置安全权限(0600,仅 root 可读写)
sudo chmod 0600 /tmp/swap_temp

# 4. 格式化为 swap 格式
sudo mkswap /tmp/swap_temp

# 5. 启用这个 15GB 临时 swap 文件
sudo swapon /tmp/swap_temp

# 6. 验证是否生效(查看 swap 列表和总大小)
swapon --show
free -h

如果要清理swap空间,执行

bash 复制代码
sudo swapoff /tmp/swap_temp  # 关闭 swap
rm -f /tmp/swap_temp         # 删除文件

huggingface更换目录

首先移动原本的文件:

bash 复制代码
# 核心:直接指定源和目标路径,极简版 mv 也支持目录移动
mv ~/.cache/huggingface /work/home/ac0xf2jf13/cyun/

# 验证移动结果(能看到 huggingface 目录即成功)
ls -ld /work/home/ac0xf2jf13/cyun/huggingface

替换相关配置

bash 复制代码
# 添加以下内容(复制到末尾)
export HUGGINGFACE_HUB_CACHE=/work/home/ac0xf2jf13/cyun/huggingface/hub
export HF_DATASETS_CACHE=/work/home/ac0xf2jf13/cyun/huggingface/datasets

ffmpeg视频处理

这里我们只用到ffmpeg的一个功能,那就是视频的截取功能:

bash 复制代码
sudo apt update && sudo apt install -y ffmpeg
bash 复制代码
ffmpeg -i input.mp4 -ss 00:02:00 -to 00:17:00 -c:v copy -c:a copy output.mp4

清理空间

这里主要是清理pip存缓和谷歌浏览器的存缓:

bash 复制代码
pip cache purge > /dev/null 2>&1
rm -rf ~/.cache/pip/* > /dev/null 2>&1
rm -rf ~/.config/google-chrome/Default/Service\ Worker/CacheStorage/*
相关推荐
ch6234 小时前
《AI 辅助编程实战:从零跑通一个 Excel 报表生成脚本的踩坑与复盘》
人工智能·python
import_random4 小时前
[python]conda和pip(区别和联系2)
python
Aurorar0rua5 小时前
CS50 x 2024 Notes Python - 01
开发语言·python·学习方法
用户6602676118795 小时前
备注接口返回成功,数据库却没变:怎样限定一次修复的范围?
python
Dumbness5 小时前
用 Python + UI Automation 读写微信 PC 版:一个群消息自动回复程序的实现与踩坑
python
艺杯羹5 小时前
Windows跨平台编码地雷全解:从GBK静默崩溃到内核级原子写入防御
人工智能·python·桌面客户端
用户8356290780515 小时前
使用 Python 在 Excel 中识别并高亮重复数据与唯一数据
后端·python
CCblandy5 小时前
Agent 工具调用怎么编排?本机实测:并行只到 2.63 倍,慢的先发省 30ms,CPU 活加 worker 无效
人工智能·后端·python·性能优化
用户8356290780515 小时前
使用 Python 在 Excel 中查找、替换数据并高亮显示
后端·python
GPU实战笔记5 小时前
PyCharm 接云 GPU:远端项目连接与远程解释器别混为一谈
python·pycharm·ssh·远程开发·云gpu