说说对 Node 中的 Stream 的理解?应用场景?
参考答案
概念
Stream(流)是 Node 中对连续数据的分段处理抽象,把大数据拆成小块(chunk)边读边处理,避免一次性加载到内存。
四种类型
| 类型 | 说明 | 例子 |
| --- | --- | --- |
| Readable | 只读数据源 | fs.createReadStream、http.IncomingMessage |
| Writable | 只写目的地 | fs.createWriteStream、http.ServerResponse |
| Duplex | 双向(读写独立) | net.Socket、zlib |
| Transform | 双向且读写有转换关系 | zlib.createGzip、crypto.createCipheriv |
关键机制
- 缓冲 + 背压(backpressure):
write()返回false表示缓冲区满,应等'drain'再写;pipe会自动处理背压。 - 两种模式:流动模式(
data事件 /pipe)与暂停模式(read()手动拉取),pause/resume切换。 - 对象模式(
objectMode: true)可传任意 JS 对象,常用于数据管道。 - 事件:
data、end、finish、error、close、drain。 - pipeline:
stream.pipeline(src, transform, dst, cb)自动串联并统一错误与销毁,优于裸pipe。
应用场景
- 大文件读写/复制(不爆内存)。
- 文件上传下载、HTTP 代理转发。
- 日志压缩与轮转(
createGzip)。 - CSV/JSON 大文件逐行解析(
readline、csv-parser)。 - 数据 ETL 管道、加解密。
实践
const { pipeline } = require('stream/promises');
await pipeline(
fs.createReadStream('big.log'),
zlib.createGzip(),
fs.createWriteStream('big.log.gz')
);
- 一定监听
error,裸pipe出错不会自动销毁两端,容易泄漏句柄。 - 自定义流实现
_read/_write,注意回调callback(err, chunk)的调用时机。