在Spark的reduceByKey操作時會觸發Shuffle的過程,在Shuffle之前,會有本地的聚合過程產生MapPartitionsRDD,接著具體Shuffle會產生ShuffledRDD,
億速云公眾號
手機網站二維碼
Copyright ? Yisu Cloud Ltd. All Rights Reserved. 2018 版權所有
廣州億速云計算有限公司粵ICP備17096448號 粵公網安備 44010402001142號增值電信業務經營許可證編號:B1-20181529