240 发简信
IP属地:北京
  • How does Index Source work in Presto

    Overview Presto Index Source is an optimizing strategy based on the inde...

  • Presto连接器-grouped_execution功能要实现的接口

    presto连接器-grouped_execution功能要实现的接口 原理 分组执行是presto在2017年就支持的功能,它的原理是: 根据...

  • Presto调度模块源码阅读(2)-服务端响应-资源组选择

    当用户提交一个SQL作业时,Presto客户端会封装一个Request通过Restful接口将请求发送到服务端,下面就详细讲解一下服务端的处理过...

  • Resize,w 360,h 240
    Presto调度模块源码阅读(1)-Client提交请求

    当客户端以控制台Console、脚本--execute等方式提交SQL作业时,Presto的Client会将作业相关的参数和脚本封装成一个...

  • Resize,w 360,h 240
    Spark-streaming-2.0-Kafka数据接收并行度源码学习

    前段时间学习了spark streaming采用kafka作为数据源时,数据接收并行度这一部分的源代码。本文主要将学习的体会记录一下,有理解不对...

  • Resize,w 360,h 240
    spark2.0-executor分配机制源码学习

    本文主要讲解一下spark2.0版本Spark-StandAlone模式下executor的分配过程和分配机制。 跟踪这一块的源代码应该从Spa...

  • Resize,w 360,h 240
    Spark2.0 scheduler模块源码学习

    Scheduler模块主要负责stage的划分,以及job的调度及submit。是整个spark计算流程中比较重要的部分。 �1.从saveAs...