Spark面对OOM问题的解决方法及优化总结1

时间:2022-08-08 22:40:41
【文件属性】:
文件名称:Spark面对OOM问题的解决方法及优化总结1
文件大小:299KB
文件格式:DOCX
更新时间:2022-08-08 22:40:41
spark 2.数据不平衡导致内存溢出:    数据不平衡除了有可能导致内存溢出外,也有可能导致性能的问题,解决方法和上面说的类似,就是调用repartition重新分区

网友评论