240 发简信
IP属地:北京
  • Resize,w 360,h 240
    spark MetricsSystem 完全揭秘

    MetricsSystem系统,顾名思义就是来度量系统的各项指标的,比如说可以度量driver,worker,executor端的jvm相关的信...

  • Resize,w 360,h 240
    spark 中的事件总线 ListenerBus

    事件监听模式一般需要定义3种组件:事件对象,事件源,事件监听器。在spark里面事件监听由ListenerBus组件负责,ListenerBus...

  • Resize,w 360,h 240
    为何spark中需要设计RDD这个一个概念

    先来看一篇分享: 什么是Spark中的RDD以及我们为什么需要它? Spark一般已经过度使用Hadoop(MapReduce),因为它在迭代处...