10篇文章 · 11517字 · 1人关注
-
Hadoop YARN 从节点NodeManager异常
Hadoop服务好一阵没管了，今天上线发现从节点已宕机。重启服务后，有个从节点只运行了DataNode而没有NodeManager进程，查看日志...
-
Hadoop没有启动datanodes
采用Hadoop自带的基准测试工具写入文件时，出现问题： 采用$jps命令查看，datanodes节点中只启动了“nodemanager"，并无...
-
Hadoop小解疑
1. Hadoop中的流数据访问 Hadoop采用“一次写入、多次读取(流式数据访问)”的访问模式。对于大规模数据集而言， 读取整个数据集的时间...
-
Hadoop安装（完全分布式）
有空，上一个完整过程。 softwareversionoperating systemUbuntu 18.04.3 LTSjdk version...
-
HDFS多副本放置策略及云中的优化（LDBAS）在HDFS集群中，一般设置多副本提高可靠性（冗余），也能提高数据读取的总体性能。但这多个副本应该选择哪些节点进行放置呢？即本文要讨论的数据放置策...
-
6.824-Lab1: MapReduce
MapReduce, 批处理的典型之一。主要思想即“分而治之”，将一大批数据（一个大任务）分成多个子任务，分别进行运算（同时）（map），再将运...
-
DDIA Distributed Data: Replication
正文之前小吐槽下：上课很心累，作业太多了，而且很多作业的意义不大(mei you yi yi)。某课程的实验要求写的莫名其妙，连给的镜像资源也莫...
-
read Bigtable paper本来想动动手，然而Bigtable不开源-->_<--，那就把读论文的点写上来吧。网上这类文章挺多了，我也没有get到什么别人没get到的东西。...
-
DDIA 理解data model & data structure：II structures上一篇留下了data structure部分，在这里继续完成。开始前，先介绍涉及到的一个概念：数据仓库。 Data Warehouse数据仓库 ...
文集作者
