往topic发一个消息，如果需要处理n个业务，就可以写到n个消费者组，如果是单独的业务模块不需要关心也不影响老业务，这种方式对于都写到一个消费者里，有利于代码解耦和模块扩展。...
IP属地：陕西
-
spring集成kafka，实现一个topic可以被多个group消费
-
spark 作业调优指南
我们以数据源自kafka为例，进行spark作业调优的分析 1 资源评估 网络能力： 评估下使用的节点数、网络带宽，与所要处理的数据量，在网络能力上是否匹配。节点直接的网络是...
-
Hadoop的元数据治理--Apache AtlasHadoop的元数据治理--Apache Atlas Apache Atlas是Hadoop社区为解决Hadoop生态系统的元数据治理问题而产生的开源项目，它为Hadoop集...
-
PaaS平台的服务目录(一):Service Broker的前世今生Service Catalog（服务目录)是Kubernetes社区的孵化项目Kubernetes Service Catalog Project，旨在接入和管理第三方提供的...
-
yarn on yarn cgroup 资源隔离(cpu篇)环境配置 背景 yarn container 默认不支持对cpu进行资源隔离，一些计算密集型任务甚至可能占满NM节点的cpu资源，从而影响到其他任务的执行效率。 spark ...
-
YARN源码解析(6)-CapacityScheduler
这篇文章的前半部分，我会翻译一篇不错的关于介绍CapacityScheduler各种概念的文章。实际上，也不能算是翻译，我会在其中穿插一些我的理解，并会删减一些内容。 在后面...
-
-
-
yarn应用场景基本架构和资源调度
YarnYarn产生背景：Yarn直接来自于MR1.0MR1.0 问题：采用的是master slave结构，master是JobTracker。Slave是TaskTrac...
