首页 > 技术文章 > Spark sql优化

gouhaiping 2020-03-07 22:00 原文

spark_sql_shuffle_partitions设置executor的partitions个数,注意这个参数只对SparkSQL有用

但是有的文章说这是并行度,一个partitions相当于一个task?

推荐阅读