spark 的rdd 和 hdfs的广播 的联系和应用,有人了解吗?

鼠标设置2022-10-01  5

有人了解spark的rdd和hdfs广播的连接和应用吗?有人了解spark的rdd和hdfs广播的连接和应用吗?导读:有人知道spark的rdd和hdfs广播的联系和应用吗?解决方法:广播是因为excutor的计算需要驱动的一些数据。如果不广播的话,每次使用的时候都会从驱动中取,导致效率低,io多,解决这个问题。
转载请注明原文地址:https://juke.outofmemory.cn/read/1855961.html

最新回复(0)