spark foreach调用restful接口同步数据效率太差

扬声器工作原理2022-10-02  3

Spark foreach调用restful接口同步数据效率很差。简介:通过编写一个spark程序,读取数据库形成RDD,然后在RDD上执行foreach操作,在内部实现方法中,通过调用restful接口将遍历的元素同步到本地数据库,并将程序提交给spark集群。
转载请注明原文地址:https://juke.outofmemory.cn/read/1873100.html

最新回复(0)