zl程序教程

您现在的位置是:首页 >  大数据

当前栏目

第21课:Spark性能调优之系统资源使用原理和调优最佳实践

性能Spark原理 实践 最佳 21 调优 系统资源
2023-09-27 14:26:48 时间

21课:Spark性能调优之系统资源使用原理和调优最佳实践

我们从Spark资源的角度讲解性能调优的原因:无论是算子调优、Shuffle、数据倾斜等实质上都涉及到资源的使用。我们从Spark官网(http://spark.apache.org/docs/latest/cluster-overview.html)看一下Spark运行架构图: