深度学习日志及可视化过程

一、什么是 TensorBoard?

TensorBoard 是一组用于数据可视化的工具。它包含在流行的开源机器学习库 Tensorflow 中。TensorBoard 的主要功能包括:

可视化模型的网络架构

跟踪模型指标,如损失和准确性等

检查机器学习工作流程中权重、偏差和其他组件的直方图

显示非表格数据,包括图像、文本和音频

将高维嵌入投影到低维空

二、什么是 wandb?(需要用到外网,也有offline离线模式)

wandb的核心功能就是跟踪训练过程,展示训练流程以供我们观察展示和分析

三、总结wandb和tensorboard

1. 核心功能对比

特性 WandB TensorBoard
开发方 Weights & Biases 公司 Google (TensorFlow 生态)
主要用途 实验跟踪、协作、模型管理 训练过程可视化(TensorFlow 优先)
实时更新 ✅ 支持 ❌ 需手动刷新
协作功能 ✅ 多用户共享、评论、报告生成 ❌ 仅本地或自行搭建服务共享
数据存储 ☁️ 云端(可离线导出) 💻 本地文件(需自行管理)
框架支持 PyTorch、TF、JAX 等(框架无关) TensorFlow(原生)、PyTorch(插件)
超参数记录 ✅ 自动记录 ✅ 需手动配置
模型版本控制 ✅ 集成(可保存模型快照) ❌ 需结合 Git 或其他工具

2. 使用场景推荐

  • 选择 WandB 如果:

    • 需要团队协作或远程查看实验结果。

    • 希望自动记录超参数、代码版本、系统指标(如GPU温度)。

    • 需生成精美的共享报告(如论文复现、项目交付)。

  • 选择 TensorBoard 如果:

    • 纯本地开发,无需云端功能。

    • 深度依赖 TensorFlow 生态(如 TF Serving 集成)。

    • 对隐私要求极高(数据完全离线)。


3. 代码示例对比

WandB 基础用法
复制代码
import wandb

# 初始化项目
wandb.init(project="my-project", config={"lr": 0.01})

# 记录指标
for epoch in range(100):
    loss = train_step()
    wandb.log({"loss": loss})  # 自动同步到云端

# 保存模型
wandb.save("model.h5")
TensorBoard 基础用法
复制代码
from torch.utils.tensorboard import SummaryWriter

writer = SummaryWriter("logs/")  # 本地存储

for epoch in range(100):
    loss = train_step()
    writer.add_scalar("loss", loss, epoch)  # 写入本地文件

writer.close()
# 启动服务:tensorboard --logdir=logs/

4. 优缺点总结

工具 优点 缺点
WandB - 开箱即用的协作功能 - 丰富的仪表盘和报告 - 自动环境捕获 - 免费版有限制(团队人数、存储) - 需联网(可离线模式)
TensorBoard - 完全免费和离线 - 与 TensorFlow 深度集成 - 可扩展性强 - 协作功能弱 - 界面较老旧

5. 如何选择?

  • 科研/团队项目 → WandB(提升协作效率)。

  • 工业部署/TensorFlow 项目 → TensorBoard(稳定性优先)。

  • 轻量级实验 → TensorBoard(避免依赖)。

相关推荐
师夷长技以自愈7 小时前
手搓 AI Agent 第 8 篇:从手写循环到画流程图——LangGraph 封装
人工智能·python
数据治理自习室7 小时前
2026最新:MCP开发与使用指南
人工智能
小小疯狐狸7 小时前
我踩过的Agent harness几个坑:上下文越跑越慢
人工智能
kaixin_啊啊8 小时前
【零基础学AI】第 30 章——对话记录与结构化输出
人工智能
泯泷8 小时前
让知识"长骨架"——RAPTOR、GraphRAG 与 OpenViking(四)
人工智能·llm
kaixin_啊啊9 小时前
【零基础学AI】第 30 章课后练习与答案
人工智能
电科_银尘9 小时前
【深度学习项目实战·33】自定义数据集:把自己的图片接入PyTorch
人工智能·pytorch·深度学习
武子康9 小时前
单卡 A6000 跑 Qwen-Drive:怎样留下可比较的第一条基线?
linux·人工智能·深度学习
严肃小白兔9 小时前
第 06/24 期:神经网络的反向传播算法:从链式法则到梯度计算
人工智能·神经网络·算法