概述 Spark on Yarn的日志配置分为两类： Spark on Yarn client模式 Spark on Yarn cluster模式 接下为大家逐一介绍。 Sp...
发简信
IP属地：湖北
-
Spark2x on yarn日志配置详解
-
-
第三章 Yarn应用设计概述 Yarn是一个资源的管理系统，负责集群的管理及调度。如果想要一个应用运行在Yarn，需要编写两个组件： Client（客户端）客户端负责项目ResourceManage...
-
第二章 Yarn基础库简介 与MRv1相比Yarn的设计要复杂得多。YARN借用了MRv1的一些底层基础库（如RPC库），又引入了很多新的设计方式，它的基础库更多，如：google的开源序列化框架...
-
第一章 Yarn简介简介 Yarn是Hadoop生态圈中的一个通用资源管理系统和调度平台，产生于Hadoop2。可为上层应用提供统一的资源管理和调度，它的引入为集群在利用率、资源统一管理和数据共...
-
Docker容器通过宿主机安装JDK和MAVEN
1，下载jdk和maven JDK http://www.oracle.com/technetwork/java/javase/downloads/jdk8-download...
-
Sqoop的使用
1，什么是Sqoop sqoop是apache旗下一款“Hadoop和关系数据库服务器之间传送数据”的工具。导入数据：可以从MySQL，Oracle等关系数据库中导入数据到H...
-
Hive的安装1 前期准备 1，需要搭建HDFS2，需要搭建MapReduce3，安装mysql( 其它数据库都可以),如果不是很清楚安装mysql，请查看 http://www.li...
-
Hadoop HA部署详解
1，前期准备 1 修改Linux主机名2 修改IP3 修改主机名和IP的映射关系 /etc/hosts4 关闭防火墙5 ssh免登陆6 安装JDK，配置环境变量等 2，集群规...
-
Mapreduce的经典排序（快排 & 归并）1，快速排序 基本思想：选择一个基准元素,通常选择第一个元素或者最后一个元素,通过一趟扫描，将待排序列分成两部分,一部分比基准元素小,一部分大于等于基准元素,此时基准元素在其...
-
Java NIO(1) 概述什么是JavaNIO NIO全名(NewInput/ Output),在java1.4中引入。NIO是一种同步非阻塞的IO模型。同步是指线程不断轮询IO事件是否就绪，非阻...
-
第一章 Solr安装
本文是基于solr6.4和tomcat8.5进行单机环境的安装。 1，准备工作： 下载Solr-6.6.0 http://www.apache.org/dyn/clos...
-
简书问题反馈快捷通道：<a href="https://www.jianshu.com/g/c921f9f70f1af261" target="_blank">https://www.jianshu.com/g/c921f9f70f1af261</a>
-
电影、电视剧、综艺节目、网剧约稿添加个人微信：windy18233968787
-
2016-2018简书上班这点事儿主编，致敬最快乐、成长最快、自我迭代最快的两年，那时候提起正在做的事情，两眼发光，无比自信，也是在这里得到很多支持和鼓励，感恩所有❤
-
简书播客官号。<br><br>简书播客将邀请各主播大咖朗读简书的文章，愿美妙的声音一直陪伴你。<br><br>点击投稿须知：<a href="https://www.jianshu.com/p/dd300022a85a" target="_blank">http://www.jianshu.com/p/dd300022a85a</a>
-
公众号：上享生活 （id：more-enjoy）<br>国家级形象规划设计顾问，时尚撰稿人<br>所有文章均为原创。约稿、转载或商务合作，请敲微信号907497474（请务必说明来意）。<br>感谢您！<br>
-
<br>「写作是一种极小的拯救。」<br>个人微信号：13487221153<br>个人公众号：江昭和<br>新浪微博：江昭和<br>文章未经允许，不得擅自转载。
-
一个勇于直面幻灭的理想主义者。<br>微信公众号：特立独行的猪先生（zhuxiansheng2222）微博：@特立独行的猪先森
