fs.createWriteStream实现

用法

const CreateWriteStream = require('./CreateWriteStream')

const ws = new CreateWriteStream('./test/2.md', {
  flags: 'w', // 默认读取
  encoding: 'utf8', // 默认utf8
  fd: null, // 取拿一个文件,默认null,createReadStream自己处理得到
  mode: 0o666, // 默认值可读可写不可操作
  highWaterMark: 1,
  autoClose: true // 默认 ture,读取完毕后关闭文件
})

let i = 9

function write () {
  let flag = true
  while (i && flag) {
    flag = ws.write(i-- + '')
    console.log(flag)
  }
}

write()

ws.on('drain', () => {
  console.log('drain')
  write()
})

ws.on('open', () => {
  console.log('open')
})

ws.on('error', () => {
  console.log('error')
})

实现

const fs = require('fs')
const EventEmitter = require('../EventEmitter/eventEmitter')
class CreateReadStream extends EventEmitter {
  constructor (path, options = {}) { // 这里注意添加默认空对象
    super()
    this.path = path
    this.flags = options.flags || 'w' // 默认写入
    this.encoding = options.encoding || 'utf8' // 默认'utf8'
    this.fd = options.fd || null // 取拿一个文件,默认null,createReadStream自己处理得到
    this.mode = options.mode || 0o666 // 默认值可读可写不可操作
    this.autoClose = options.autoClose || true // 默认 ture,读取完毕后关闭文件
    this.highWaterMark = options.highWaterMark || 16 * 1024
    this.open()
    this.pos = this.start || 0
    this.len = 0
    this.writing = false
    this.cache = []
  }
  open () {
    fs.open(this.path, this.flags, this.mode, (err, fd) => {
      if (err) return this.emit('error', err)
      this.fd = fd
      this.emit('open', fd)
    })
  }
  /**
   *
   *
   * @param {*} chunk
   * @param {*} [encoding=this.encoding]
   * @param {*} callback
   * @returns true|false
   * @description 返回的布尔值标识当前要写入文件的大小大于highWaterMark值,
   * 也就是说写入速度慢于读取速度。
   * @memberof CreateReadStream
   */
  write (chunk, encoding = this.encoding, callback) {
    const buffer = Buffer.isBuffer(chunk) ? chunk : Buffer.from(chunk)
    this.len += buffer.length
    // console.log(this.len)
    if (this.len >= this.highWaterMark) {
      this.needDrain = true
    }
    if (!this.writing) {
      this._write(chunk, encoding, () => {
        typeof callback === 'function' && callback()
        this.clearCache()
      })
    } else {
      this.cache.push({
        chunk,
        encoding,
        callback
      })
    }
    return !this.needDrain
  }
  clearCache () {
    const task = this.cache.pop()
    if (task) {
      const {chunk, encoding, callback} = task
      this._write(chunk, encoding, () => {
        typeof callback === 'function' && callback()
        this.clearCache()
      })
    } else {
      if (this.needDrain) {
        this.needDrain = false
        this.writing = false
        // drain: 耗尽
        // drain事件的作用是告知使用方
        // 当前任务队列或当前写入任务中的buffer长度已经超过highWaterMark,
        // 最好等待队列中的写入任务处理完成,再进行写入操作。
        this.emit('drain')
      }
    }
  }
  _write (chunk, encoding, callback) {
    if (typeof this.fd !== 'number') {
      return this.once('open', () => this._write(chunk, encoding, callback))
      // return this.once('open', this._write)
      // 如果这样写的话,就是直将一个函数作为this.once的参数传入,相当于将该函数赋值给一个局部变量
      // 所以该函数中的this指向为全局,严格模式下为undefined。
    }
    fs.write(this.fd, chunk, this.pos, encoding, (err, written) => {
      if (err) return this.emit('error', err)
      this.len -= written
      this.pos += written
      typeof callback === 'function' && callback()
    })
  }
}

module.exports = CreateReadStream

问题

如果第一次写入的chunk体积很大,那也会造成内存溢出的问题,该如何处理?

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 215,463评论 6 497
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 91,868评论 3 391
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 161,213评论 0 351
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 57,666评论 1 290
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 66,759评论 6 388
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 50,725评论 1 294
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 39,716评论 3 415
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 38,484评论 0 270
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 44,928评论 1 307
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,233评论 2 331
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,393评论 1 345
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,073评论 5 340
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 40,718评论 3 324
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,308评论 0 21
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 32,538评论 1 268
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 47,338评论 2 368
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,260评论 2 352

推荐阅读更多精彩内容

  • Swift1> Swift和OC的区别1.1> Swift没有地址/指针的概念1.2> 泛型1.3> 类型严谨 对...
    cosWriter阅读 11,094评论 1 32
  • Lua 5.1 参考手册 by Roberto Ierusalimschy, Luiz Henrique de F...
    苏黎九歌阅读 13,782评论 0 38
  • 摘要:GFS在设计上有很多值得学习的地方,最近重读了一下GFS的设计论文,试图从架构设计的角度对GFS进行剖析,希...
    架构禅话阅读 4,384评论 0 2
  • 摘要 GFS 文件系统,一个面向大规模数据密集型应用的、可伸缩的分布式文件系统。GFS 虽然运行在廉价的普遍硬件设...
    盗梦者_56f2阅读 1,098评论 0 1
  • 你说,你最喜欢夜空,喜欢眨着眼睛调皮的星星,还有夜里凉爽惬意的风。 其实,我也最喜欢夜空,不一样的是,我喜欢月...
    2班王圯涵11号阅读 125评论 1 1