報錯如下:
Exception in thread "main" java.lang.IllegalArgumentException: System memory 259522560 must be at least 471859200. Please increase heap size using the --driver-memory option or spark.driver.memory in Spark configuration.
?
測試了調整idea的vm參數 和spark的spark.driver.memory都沒有效果,最后發現需要調整idea的程序啟動參數
啟動參數中添加VM Options:(具體內存使用大小根據實際情況條件即可)
-server -Xms512M -Xmx1024M -XX:PermSize=256M -XX:MaxNewSize=512M -XX:MaxPermSize=512M