深度学习日志及可视化过程

一、什么是 TensorBoard?

TensorBoard 是一组用于数据可视化的工具。它包含在流行的开源机器学习库 Tensorflow 中。TensorBoard 的主要功能包括:

可视化模型的网络架构

跟踪模型指标,如损失和准确性等

检查机器学习工作流程中权重、偏差和其他组件的直方图

显示非表格数据,包括图像、文本和音频

将高维嵌入投影到低维空

二、什么是 wandb?(需要用到外网,也有offline离线模式)

wandb的核心功能就是跟踪训练过程,展示训练流程以供我们观察展示和分析

三、总结wandb和tensorboard

1. 核心功能对比

特性 WandB TensorBoard
开发方 Weights & Biases 公司 Google (TensorFlow 生态)
主要用途 实验跟踪、协作、模型管理 训练过程可视化(TensorFlow 优先)
实时更新 ✅ 支持 ❌ 需手动刷新
协作功能 ✅ 多用户共享、评论、报告生成 ❌ 仅本地或自行搭建服务共享
数据存储 ☁️ 云端(可离线导出) 💻 本地文件(需自行管理)
框架支持 PyTorch、TF、JAX 等(框架无关) TensorFlow(原生)、PyTorch(插件)
超参数记录 ✅ 自动记录 ✅ 需手动配置
模型版本控制 ✅ 集成(可保存模型快照) ❌ 需结合 Git 或其他工具

2. 使用场景推荐

  • 选择 WandB 如果

    • 需要团队协作或远程查看实验结果。

    • 希望自动记录超参数、代码版本、系统指标(如GPU温度)。

    • 需生成精美的共享报告(如论文复现、项目交付)。

  • 选择 TensorBoard 如果

    • 纯本地开发,无需云端功能。

    • 深度依赖 TensorFlow 生态(如 TF Serving 集成)。

    • 对隐私要求极高(数据完全离线)。


3. 代码示例对比

WandB 基础用法
复制代码
import wandb

# 初始化项目
wandb.init(project="my-project", config={"lr": 0.01})

# 记录指标
for epoch in range(100):
    loss = train_step()
    wandb.log({"loss": loss})  # 自动同步到云端

# 保存模型
wandb.save("model.h5")
TensorBoard 基础用法
复制代码
from torch.utils.tensorboard import SummaryWriter

writer = SummaryWriter("logs/")  # 本地存储

for epoch in range(100):
    loss = train_step()
    writer.add_scalar("loss", loss, epoch)  # 写入本地文件

writer.close()
# 启动服务:tensorboard --logdir=logs/

4. 优缺点总结

工具 优点 缺点
WandB - 开箱即用的协作功能 - 丰富的仪表盘和报告 - 自动环境捕获 - 免费版有限制(团队人数、存储) - 需联网(可离线模式)
TensorBoard - 完全免费和离线 - 与 TensorFlow 深度集成 - 可扩展性强 - 协作功能弱 - 界面较老旧

5. 如何选择?

  • 科研/团队项目WandB(提升协作效率)。

  • 工业部署/TensorFlow 项目TensorBoard(稳定性优先)。

  • 轻量级实验 → TensorBoard(避免依赖)。

相关推荐
沧沧凉凉40 分钟前
同一个 Blender 建模,Claude 两个模型都翻车,GPT-6 一次过
人工智能·游戏·ai编程
X54先生(人文科技)1 小时前
ELR-SELLM Edge 神经元网络架构评估报告
人工智能·深度学习·架构·开源
今年下半年1 小时前
从零开始搭建一套大语言模型 + LangGraph 多智能体编排 + RAG 知识库检索** 的智能问答平台
人工智能·语言模型·自然语言处理
Lifangyun_WD1 小时前
RTX 5090 与 RTX PRO 6000 怎么选?32GB 和 96GB 显存分别适合哪些 AI 任务
人工智能·aigc·gpu算力·芯片·gpu租赁
hqyjzsb1 小时前
零 AI 项目经验,学 Python 转型 AI 的正确顺序是什么?
开发语言·人工智能·python·算法·职场和发展·数据挖掘·数据分析
微功夫信息技术1 小时前
分层多智能体强化学习驱动的非急救转运公平 - 效率统一调度系统研究与实践
人工智能·学习·算法·动态规划
TechEdu2026062 小时前
[人工智能]AI芯片家族与产品目录指南
人工智能·ai
不会写代码的女程序猿2 小时前
中小康养门店选型参考|明理 AI 四诊仪场景适配与投入回报分析
大数据·人工智能·科技·ai·健康医疗
机器人猎头David2 小时前
VLA、世界模型、强化学习,在机器人里分别解决什么问题?
人工智能·机器人·机器人猎头·机器人猎头公司