node.js基础学习-fs模块-Stream流(七)

一、前言

在 Node.js 的fs(文件系统)模块中,流(Stream)是一种处理数据的高效方式。它允许以连续的方式读取或写入数据,而不必将整个文件的内容一次性加载到内存中。这对于处理大型文件特别有用,因为它可以避免内存溢出问题,并且在数据处理过程中可以更早地开始处理部分数据,而不必等待整个文件读取完成。

二、可读流(Readable Stream)

创建可读流:

可以使用fs.createReadStream()方法来创建一个可读流。例如,要读取一个文本文件,可以这样做:

js 复制代码
const fs = require('fs');
const readableStream = fs.createReadStream('example.txt');

这个方法接受一些参数,如文件名、文件编码(默认是null,会以二进制模式读取)、可选的开始位置和结束位置(用于读取文件的特定部分)等。

事件和数据读取:

可读流会触发data事件,当有数据块从流中读取出来时,就会触发这个事件。例如:

js 复制代码
const fs = require('fs');
const readableStream = fs.createReadStream('example.txt');
readableStream.on('data', (chunk) => {
    console.log('Received a data chunk:', chunk.toString());
});

这里将读取到的数据块(chunk)转换为字符串进行打印。可读流还会触发end事件,当文件读取完毕时会触发该事件,error事件则在读取过程中出现错误时触发。

暂停和恢复读取:

可读流可以通过pause()方法暂停读取数据,通过resume()方法恢复读取。例如:

js 复制代码
const fs = require('fs');
const readableStream = fs.createReadStream('example.txt');
let paused = false;
readableStream.on('data', (chunk) => {
    if (!paused) {
        console.log('Received a data chunk:', chunk.toString());
    }
    if (someCondition) {
        paused = true;
        readableStream.pause();
    }
});
setTimeout(() => {
    paused = false;
    readableStream.resume();
}, 5000);

三、可写流(Writable Stream)

创建可写流:

使用fs.createWriteStream()方法创建可写流。例如,要写入一个新的文本文件,可以这样操作:

js 复制代码
const fs = require('fs');
const writableStream = fs.createWriteStream('newFile.txt');

它同样接受一些参数,如文件名、文件编码(默认是utf8)等。

写入数据:

可以通过write()方法向可写流中写入数据。例如:

js 复制代码
const fs = require('fs');
const writableStream = fs.createWriteStream('newFile.txt');
const data = 'This is some data to write';
writableStream.write(data);
writableStream.end();

注意在写入数据后,通常需要调用end()方法来表示数据写入结束。如果不调用end(),可能会导致数据没有完全写入文件。可写流会触发finish事件,当所有数据都已成功写入并且流已经结束时会触发该事件,error事件在写入过程中出现错误时触发。

四、管道(Pipe)操作

管道操作是一种非常方便的将可读流和可写流连接起来的方式。例如,可以将一个文件读取流直接管道到一个文件写入流,从而实现文件的复制:

js 复制代码
const fs = require('fs');
const readableStream = fs.createReadStream('sourceFile.txt');
const writableStream = fs.createWriteStream('destinationFile.txt');
readableStream.pipe(writableStream);

管道操作内部会自动处理数据的读取、写入以及流的各种事件(如dataend等),使得代码更加简洁和高效。同时,还可以在管道中间插入其他的转换流(如zlib模块中的压缩流或解压缩流)来对数据进行处理。

相关推荐
小+不通文墨5 分钟前
--no-multibyte-chars 解决OLED_data.c移植后中文乱码问题
c语言·经验分享·笔记·学习
知识分享小能手30 分钟前
统计学学习教程,从入门到精通,一元线性回归 —— 知识点详解(17)
学习·算法·线性回归
青山是哪个青山1 小时前
LangChain 1.x 学习笔记(一):为什么需要 LangChain?一文彻底理解 LangChain 生态
笔记·学习·langchain
cooldream20091 小时前
AI 时代,前端工程师的“新学习路线“—— 从“学框架“到“用 AI“
前端·人工智能·学习
CappuccinoRose1 小时前
Rust学习文档(二)
开发语言·后端·学习·rust
冻感糕人~2 小时前
大模型学习指南:收藏这份AI Agent四层工程地图(小白程序员必备)
java·大数据·人工智能·学习·大模型·agent·大模型学习
曲三酒馆2 小时前
“强比命打,钱娃D写”——这8个字就是我人生的全部了![特殊字符]
学习·生活·娱乐
统计学小王子2 小时前
《数学少年-确定与不确定》(第四章:“骰子不骗人“)
学习·初中数学科普
其实防守也摸鱼2 小时前
前端应用的离线暂停更新策略:构建稳定可靠的渐进式部署方案
服务器·前端·数据库·学习·ai·命令行·linux系统
MartinYeung53 小时前
[论文学习]Mamba:具有选择性状态空间的线性时间序列建模
学习