你好,请问一下,如果我用的是默认的standalone模式的cluster manager而不是yarn,那么在ExecutorAllocationManager中client.requestTotalExecutors()提交申请后,cluster manager是如何回应的?这个代码在哪里可以找到?谢谢!
Spark 动态资源分配(Dynamic Resource Allocation) 解析Spark 默认采用的是资源预分配的方式。这其实也和按需做资源分配的理念是有冲突的。这篇文章会详细介绍Spark 动态资源分配原理。 前言 最近在使用Spark Stream...