Spark提交程序报错,无法创建新的线程

Spark无法创建新线程

原因是因为这台公用机器上跑的进程太多了,需要修改Linux参数,允许用户最大进程数

查看允许用户最大进程数配置

ulimit -a

Spark无法创建新线程

修改允许用户最大进程数配置

vim /etc/profile

在文件后面追加一句,并使配置立即生效,设置太大也不好,Java内存不够用[囧]

ulimit -u 4096
source /etc/profile

 

相关文章: