大数据量的情况下用pyspark对数据进行处理的时候
pycharm运行会出现ERROR Utils: Uncaught exception in thread stdout writer for python错误
需要修改JVM参数
打开pycharm的安装目录 C:\Program Files (x86)\JetBrains\PyCharm 2016.2.3\bin下文件pycharm.exe.vmoptions
修改默认(版本2016.2)的
-server
-Xms128m
-Xmx512m
为
-server
-Xms256m
-Xmx1024m