发简信
IP属地：江苏
-
《Hadoop-MapReduce源码解析》之二: org.apache.hadoop.mapreduce.JobSubmitter#submitJobInternal
Hadoop版本：2.10.2 书接上文：《MapReduce源码解析》之一:org.apache.hadoop.mapreduce.Job#w...
-
《Hadoop-MapReduce源码解析》之一: org.apache.hadoop.mapreduce.Job#waitForCompletion
Hadoop版本：2.10.2 1. org.apache.hadoop.mapreduce.Job#waitForCompletion 2. ...
-
Failed to set setXIncludeAware(true) for parser org.apache.xerces.jaxp.DocumentBuilderFactoryImpl...
JDK 1.8 Spark 2.4.8 Scala 2.11.8 运行Spark时 APP 2023-12-07 13:16:33,326 ...
-
2023年终总结（2020-2023）
大家好，我是一名工作了4年的程序员 2020年 走出校园，进入社会，开始起了我的职业生涯 之前在学校，还是满压抑的 本该2019年毕业的，由于导...
-
Spark三种模式的安装与配置环境准备 jdk1.8.0_301 scala-2.11.8 spark-2.4.8-bin-hadoop2.7 hadoop-2.7.6（sp...
-
Spark架构基本介绍简介 Apache Spark 是专为大规模数据处理而设计的快速通用的计算引擎。 Spark是UC Berkeley AMP lab (加州大学...
-
基于MongoDB的分布式锁的实现
背景 并发量：小于50 不同机器上的多个线程修改同一份数据 参考链接 https://www.jianshu.com/p/9055ca856aa...
-
Flume的三要素（Source/Channel/Sink）、拦截器、选择器、Sink组三要素（Source/Channel/Sink） Source：负责接收数据到flume的组件1.Netcat：基于TCP端口的数据源接收器# ...