240 发简信
IP属地:四川
  • Resize,w 360,h 240
    SortShuffleManager

    Shuffle作为spark数据处理的一个很重要的步骤,在最新的spark版本中,默认使用 [org.apache.spark.shuffle....

  • Resize,w 360,h 240
    Spark内存管理模块-TaskMemoryManager-0005

    首先来看其类结构: 先来看类的定义“ 关于这个类,没有实现或者继承任何接口或者类,并且是使用java实现的。结下来关注一组变量: 接下来的一组变量:

  • Resize,w 360,h 240
    java中的线程池

    最顶层是一个叫Executor的接口,其仅仅定义了一个方法: 我们会发现其依然是一个接口,但是多加了几个方法: 这里并不打算一一介绍,我们重点关...

  • Redis缓存Java对象遇到的坑

    采用的是String模式存储对象,对象结构如下: 为了测试,采用了new ArrayList (){{add("20200816");add("...

  • Resize,w 360,h 240
    Spark内存管理模块-MemoryManager-0001

    在这个结构途中,我们可以看到从左到右的调用顺序。最底层的为MemoryManager,为一个抽象类,即为程序分析的入口。 以上为MemoryMa...

  • Resize,w 360,h 240
    Spark Sql 论文

    Spark SQL: Relational Data Processing in Spark ABSTRACT Spark SQL是Apa...

  • Spark:分布式计算系统

    论文链接:https://www2.eecs.berkeley.edu/Pubs/TechRpts/2010/EECS-2010-53.pdf ...