240 发简信
IP属地:北京
  • Resize,w 360,h 240
    一文读懂HashMap

    本文准备从以下几个方面去讲解HashMap:1)HashMap源码详细分析2)HashMap为什么是线程不安全的?3)HashMap和HashT...

    15.1 162303 28 446
  • MPP架构相关知识学习

    学习一下MPP架构的特点,优势,常见的一些MPP架构的系统(CK、Doris、SR、Trino等)各方面对比。 一、MPP架构概述 1.1 什么...

    676 0 0
  • 【HDFS】EC重构过程中的校验功能:DecodingValidator

    一、动机 DecodingValidator是在HDFS-15759中引入的一个用于校验EC数据重构正确性的组件。 先说下引入DecodingV...

    44 0 0
  • 【HDFS】EC文件副本缺失后,会自动补充么?

    EC存储能够有效较低存储成本,但是我们也需要关注数据可用性相关的事情,避免发生数据丢失的情况。 本文来探讨一下EC补充低冗余度的块的相关知识。 ...

    44 0 0
  • 【HDFS】BlockPlacementPolicyRackFaultTolerant#getMaxNode方法的功能及具体实例

    方法参数说明: numOfChosen:已经选择的节点数 numOfReplicas:还需要选择的副本数 方法的返回值是一个长度为2的数组:[调...

    32 0 0
  • 【Ratis】关于对Raft论文里safety的保证及代码实现

    Raft论文里算法部分核心内容就三个方面:1、Leader Election 领导者选举2、Log Replication 日志复制3、Safe...

    30 0 0
  • 【HDFS-Client系列】FSOutputSummer#write1方法的细节

    有些代码初次阅读并不能看出其中的处理细节,但是当过一段时间对这个部分熟悉了之后再来阅读,就能发现并体会其中的细节。 本文说一下FSOutputS...

    1001 0 0
  • 【HDFS】如果文件的lastblock的最后一个chunk不满512字节,会生成checksum么?

    如题,本文试图弄清楚这样一个问题:如果文件的最后一个block的最后一个chunk里的数据不足512字节,那么还会为其生成checksum么? ...

    1150 0 0
  • 【HDFS】FsDatasetSpi#adjustCrcChannelPosition

    FsDatasetSpi接口里定义adjustCrcChannelPosition方法。应用场景在:append,block recovery等...

个人介绍
大数据开发爱好者