前端如何优雅下载100G大文件?Node.js流式传输实战

💡 前端如何优雅下载100G大文件?Node.js流式传输实战

今天给大家分享一个前端下载超大文件的解决方案!工作中遇到需要下载100G大文件的场景,传统下载方式直接崩溃?来看看这个流式传输方案👇

🌟 核心思路

  1. 点击按钮先获取下载令牌(token)
  2. 通过a标签携带token访问下载接口
  3. 服务端使用流式传输(Stream)返回文件
  4. 前端边接收边保存,内存占用极低

🛠️ 前端实现

javascript 复制代码
// 下载按钮点击事件
document.getElementById('downloadBtn').addEventListener('click', async () => {
  try {
    // 1. 获取下载token
    const res = await fetch('/api/getDownloadToken', {
      method: 'POST',
      body: JSON.stringify({ filename: 'huge-file.zip' })
    });
    const { token } = await res.json();
    
    // 2. 创建隐藏的a标签触发下载
    const a = document.createElement('a');
    a.href = `/api/download?token=${token}`;
    a.download = 'huge-file.zip';
    a.style.display = 'none';
    document.body.appendChild(a);
    a.click();
    document.body.removeChild(a);
    
    console.log('下载已开始,请稍候...');
  } catch (err) {
    console.error('下载失败:', err);
  }
});

🔧 Node.js服务端代码

javascript 复制代码
const express = require('express');
const fs = require('fs');
const crypto = require('crypto');
const app = express();

// 临时存储token和文件路径的映射
const tokenMap = new Map();

app.use(express.json());

// 生成下载token
app.post('/api/getDownloadToken', (req, res) => {
  const { filename } = req.body;
  const filePath = `/data/${filename}`; // 大文件实际路径
  
  if (!fs.existsSync(filePath)) {
    return res.status(404).json({ error: '文件不存在' });
  }
  
  // 生成唯一token
  const token = crypto.randomBytes(16).toString('hex');
  tokenMap.set(token, filePath);
  
  // token有效期10分钟
  setTimeout(() => tokenMap.delete(token), 600000);
  
  res.json({ token });
});

// 流式下载文件
app.get('/api/download', (req, res) => {
  const { token } = req.query;
  const filePath = tokenMap.get(token);
  
  if (!filePath) {
    return res.status(403).send('无效或过期的token');
  }
  
  // 获取文件信息
  const stat = fs.statSync(filePath);
  const fileSize = stat.size;
  const fileName = path.basename(filePath);
  
  // 设置响应头
  res.setHeader('Content-Disposition', `attachment; filename=${fileName}`);
  res.setHeader('Content-Type', 'application/octet-stream');
  res.setHeader('Content-Length', fileSize);
  
  // 创建可读流并管道传输到响应
  const fileStream = fs.createReadStream(filePath);
  fileStream.pipe(res);
  
  // 清理token
  tokenMap.delete(token);
});

app.listen(3000, () => console.log('服务器运行中...'));

✨ 方案优势

  1. 内存友好:流式传输不占用大内存
  2. 断点续传:可通过Range头实现(进阶功能)
  3. 安全可控:token机制防止未授权下载
  4. 进度显示:前端可通过xhr监听进度(代码略)

💡 进阶优化

  • 添加下载进度条
  • 实现断点续传功能
  • 文件校验(MD5/SHA256)
  • 下载限速控制

这个方案完美解决了我们公司处理超大文件下载的痛点!大家有什么问题欢迎评论区交流~ #前端开发 #Nodejs #文件下载 #编程技巧 #web开发

相关推荐
刀法如飞13 分钟前
Claude Code Skills 推荐:2026年最值得安装的10个AI技能
前端·后端·ai编程
Lee川34 分钟前
面试手写 KeepAlive:React 组件缓存的实现原理
前端·react.js·面试
墨染天姬1 小时前
【AI】cursor提示词小技巧
前端·数据库·人工智能
烛阴1 小时前
TEngine 入门系列(一):TEngine 是什么 & 为什么选它
前端·unity3d
转转技术团队1 小时前
WebNN:让 AI 推理在浏览器中“零距离”运行
前端
刀法如飞2 小时前
TypeScript 数组去重的 20 种实现方式,哪一种你还不知道?
前端·javascript·算法
IT_陈寒2 小时前
Vite热更新失效?你可能漏了这个小细节
前端·人工智能·后端
海石2 小时前
面试官:说一下你现在使用的 AI IDE,什么,JoyCode 是什么?
前端·ai编程
彩票管理中心秘书长2 小时前
一次搞懂:在Vue里用Showdown渲染Markdown+KaTeX数学公式
前端
m0_738120722 小时前
应急响应(重点)——记一次某公司流量应急溯源分析(附带下载链接)
服务器·前端·数据库·安全·web安全·网络安全