什么是唯一一次 唯一一次，也叫ECO（Exactly once）语义是流式处理程序的重要话题，也是很多流式处理程序问题的关键所在。 为了保证每个消息在系统或网络故障的情况下，...
发简信
IP属地：北京
-
SparkStreaming Exactly Once语义总结
-
多图详解 Kafka 原理与架构，建议收藏！
来源：https://www.cnblogs.com/bainianminguo/p/12247158.html[https://www.cnblogs.com/bainia...
-
5W字总结Spark（一）(建议收藏)
本文目录： 一、Spark 基础二、Spark Core三、Spark SQL四、Spark Streaming五、Structured Streaming六、Spark 两...
-
【译】Scala面试问题（Scala interview questions）意译一篇《scala面试问题》的博客，原文地址：http://pedrorijo.com/blog/scala-interview-questions/，代码示例我在本地做了...
-
5W字总结Spark（三）(建议收藏)
八、Spark 数据倾斜 详见： 八种解决 Spark 数据倾斜的方法https://www.jianshu.com/p/a917c9969cff[https://www.j...
-
Spark--Spark Shuffle发展史及调优方法资料整理，图片来源自互联网，如有侵权请联系删除--李小李 1-Spark Shuffle发展史 1.1 Shuffle概述 在Spark的源码中，负责shuffle过程的执行...
-
【k8s系列1】spark on k8s 与 spark on k8s operator的对比
对于目前基于k8s的的spark应用，主要采用两种方式运行 spark原生支持的 spark on k8s[http://spark.apache.org/docs/3.0....
-
k8s整体架构的知识整理1、master节点 Master是Kubernetes Cluster的大脑，运行着的Daemon服务有一下几个： kube-apiserver kube-schedule...
-
一篇文章，教你学会Git
本文转载于掘金Ruheng，总结非常好，故不再重复造轮子。 在日常工作中，经常会用到Git操作。但是对于新人来讲，刚上来对Git很陌生，操作起来也很懵逼。本篇文章主要针对刚开...
