dream新世界

IP属地：广东

MongoDB分片集群部署
生产系统环境: CentOS7; MongoDB4.2 服务器规划: 生产系统环境: CentOS7; MongoDB4.2 服务器规划: 10...

868 0 0
理解NameNode
NameNode主要是用来保存HDFS的元数据信息，比如命名空间信息，块信息等。当它运行的时候，这些信息是存在内存中的。但是这些信息也可以持久化...

0.1 1186 0 1

Spark内存空间管理
http://arganzheng.life/spark-executor-memory-management.html[http://arga...

147 0 0
Spark在Hadoop集群上运行时虚拟内存超出限制
在内网搭建了一套Hadoop，接着想在yarn上运行spark-shell，之前单机运行spark-shell没有任何问题，但是当跑到yarn集...

1019 0 0
spark on yarn集群部署
1. 机器规划 IP地址hostname(主机名)身份10.213.50.94cnsz72vl0237NameNode、ResourceMana...

830 0 0
spark-3.0.0安装教程
1. 安装JDK1.8 有些系统默认安装openjdk, 先卸载之，安装标准的JDK1.8 ，使用该命令查看 openjdk的安装路径, 查出...

2669 0 0
hadoop-3.3.0安装教程
背景：部门要对接大数据部门那边的交易流水数据，然后根据产品的特性统计分析等，应用到自己部门的各个产品中（吐槽=_=!：为啥大数据部门不给帮忙做呢...

952 0 0

java 8 Collections 多字段排序
以前的做法：多级排序（java 8）通过以上例子我们可以发现 Comparator.comparing(类::属性一).reversed()...

0.1 4014 0 1
spring-boot项目中使用单元测试
spring-boot项目中使用单元测试？ pom.xml中引入spring-boot-starter-test包，目前项目已经引入，无需重复<...

0.1 576 0 1