0
点赞
收藏
分享

微信扫一扫

第23课:Spark旧版本中性能调优之HashShuffle剖析及调优


第23课:Spark旧版本中性能调优之HashShuffle剖析及调优


第23课:Spark旧版本中性能调优之HashShuffle剖析及调优_性能调优

第23课:Spark旧版本中性能调优之HashShuffle剖析及调优_spark_02




第23课:Spark旧版本中性能调优之HashShuffle剖析及调优_性能调优_03



2个core表示2个并行度

文件个数 :cpu cores * reduces tasks

spark.shuffle.consolidateFiles =true

HashShuffle在spark中已经废弃了


举报

相关推荐

0 条评论