Spark Adaptive让 Spark SQL 更高效更智能 在不开启 Adaptive Execution 之前,执行计划一旦确定,即使发现后续执行计划可以优化,也不可更改。 2021-01-07 浏览(868) 评论(0) 阅读全文
Spark Spark Shuffle运行原理 Shuffle过程本质上都是将Map端获得的数据使用分区器进行划分,并将数据发送给对应的Reducer的过程。 2021-01-07 浏览(1,701) 评论(0) 阅读全文