文件名称:Spark面对OOM问题的解决方法及优化总结1
文件大小:299KB
文件格式:DOCX
更新时间:2022-08-08 22:40:41
spark
2.数据不平衡导致内存溢出: 数据不平衡除了有可能导致内存溢出外,也有可能导致性能的问题,解决方法和上面说的类似,就是调用repartition重新分区
文件名称:Spark面对OOM问题的解决方法及优化总结1
文件大小:299KB
文件格式:DOCX
更新时间:2022-08-08 22:40:41
spark
2.数据不平衡导致内存溢出: 数据不平衡除了有可能导致内存溢出外,也有可能导致性能的问题,解决方法和上面说的类似,就是调用repartition重新分区