hadoop cdh5.1对centos系统本身的配置要求
hadoop cdh5.1对centos系统本身的配置要求
月下独酌100 发表于3年前
hadoop cdh5.1对centos系统本身的配置要求
  • 发表于 3年前
  • 阅读 23
  • 收藏 1
  • 点赞 0
  • 评论 0

新睿云服务器60天免费使用,快来体验!>>>   

摘要: java.lang.OutOfMemoryError: unable to create new native thread

当运行任务的时候,nodemanager 或报出如下错误

java.lang.OutOfMemoryError: unable to create new native thread

解决方式:配置linux本身。

echo "100000" > /proc/sys/kernel/pid_max     

echo "200000" > /proc/sys/vm/max_map_count 


针对centos6.5,追加如下文件

vi /etc/security/limits.d/90-nproc.conf


*          soft    nproc     unlimited

root       soft    nproc     unlimited


 追加如下内容

 /etc/security/limits.conf

* soft nofile 65535

* hard nofile 65535

* hard nproc 100000

* soft    nproc           100000 



ulimit -a 需要配置如下:

例如open files

max user processes


/home/game/.bash_profile 最后一行放

ulimit -u 65535


[ @  sbin]$ ulimit -a

core file size          (blocks, -c) 0

data seg size           (kbytes, -d) unlimited

scheduling priority             (-e) 0

file size               (blocks, -f) unlimited

pending signals                 (-i) 514847

max locked memory       (kbytes, -l) 64

max memory size         (kbytes, -m) unlimited

open files                      (-n) 65535

pipe size            (512 bytes, -p) 8

POSIX message queues     (bytes, -q) 819200

real-time priority              (-r) 0

stack size              (kbytes, -s) 10240

cpu time               (seconds, -t) unlimited

max user processes              (-u) 65535

virtual memory          (kbytes, -v) unlimited

file locks                      (-x) unlimited


  • 打赏
  • 点赞
  • 收藏
  • 分享
共有 人打赏支持
粉丝 25
博文 186
码字总数 56475
×
月下独酌100
如果觉得我的文章对您有用,请随意打赏。您的支持将鼓励我继续创作!
* 金额(元)
¥1 ¥5 ¥10 ¥20 其他金额
打赏人
留言
* 支付类型
微信扫码支付
打赏金额:
已支付成功
打赏金额: