本文1、2、3节介绍了Spark 内存相关之识，第4节描述了常见错误类型及产生原因并给出了解决方案。 1 堆内和堆外内存规划 Executor 的内存管理建立在 JVM 的内...
发简信
IP属地：上海
-
Spark on Yarn之Executor内存管理 -
培训师进阶（12）：开场互动游戏：乌鸦和乌龟游戏名称：乌龟和乌鸦 游戏分类：注意力训练 游戏时间：10分钟 游戏目的：氛围融洽、培训注意力、培养研究问题的动力 游戏流程： 1、请大家将左右掌心交叉相对，手臂与肩膀同宽，...
-
从0开始使用Docker搭建Spark集群最近在学习大数据技术，朋友叫我直接学习Spark，英雄不问出处，菜鸟不问对错，于是我就开始了Spark学习。 为什么要在Docker上搭建Spark集群 Spark本身提供L...
-
Spark + Kafka大数据环境的搭建和示例的简单运行1.大数据平台环境的搭建 1.1环境准备 搭建Hadoop集群环境一般建议三个节点以上，一个作为Hadoop的NameNode节点。另外两个作为DataNode节点。在本次实...
-
Spark Streaming（一）入门介绍Spark Streaming是一个实时流处理框架，实时流处理产生的背景是时效性高，数据量大，个人认为从严格意义上讲，Spark Streaming并不能算是实时流处理，只不...
-
Flink+Clickhouse在广投集团实时数仓的最佳实践Flink+Clickhouse实时数仓在广投集团的最佳实践 一、业务背景 由于历史原因，大型集团企业往往多个帐套系统共存，包括国内知名ERP厂商浪潮、用友、金蝶、速达所提供...
-
超实用的尤克里里节奏型和弦指导左手，节奏型指导右手，那么今天带给大家多种节奏型。练习好了根据不同的歌曲风格选择节奏型，或者更随性的自己选取节奏来弹，一首歌弹出多种风格，随意变化。 （和弦图链接ht...
-
2020年上海居转户记录继续——中级职称途径
前言：去年走2倍社保基数+失败后，考了中级经济师【工商管理】过关后（Mark:推荐环球网校线上课程，真的很赞），刚拿到纸质证书和资格考试登记表，就又开始运作中级职称+7年的居...
-
mybatis-plus的使用 ------ 入门
前言： mybatis在持久层框架中还是比较火的，一般项目都是基于ssm。虽然mybatis可以直接在xml中通过SQL语句操作数据库，很是灵活。但正其操作都要通过SQL语句...
-
IDEA配置Maven
IDEA配置Maven [TOC] 1.在IDEA需要配置哪些东西 maven程序:IDEA配置maven通俗的讲就是在IDEA中使用Maven程序 setting文件:se...
-
Ubuntu死机解决方法汇总作者 谢恩铭，公众号「程序员联盟」（微信号：coderhub）。转载请注明出处。原文：https://www.jianshu.com/p/36fb9eed82a3 之前的亲测...
-
Netty入门教程——认识Netty什么是Netty？ Netty 是一个利用 Java 的高级网络的能力，隐藏其背后的复杂性而提供一个易于使用的 API 的客户端/服务器框架。Netty 是一个广泛使用的 J...
-
五大常用算法一(回溯,随机化,动态规划)回溯算法 回溯法：也称为试探法，它并不考虑问题规模的大小，而是从问题的最明显的最小规模开始逐步求解出可能的答案，并以此慢慢地扩大问题规模，迭代地逼近最终问题的解。这种迭代类似...
-
