这篇文章主要为大家展示了“hadoop cdh5.1对centos系统本身的配置要求是什么”,内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下“hadoop cdh5.1对centos系统本身的配置要求是什么”这篇文章吧。
创新互联专注为客户提供全方位的互联网综合服务,包含不限于成都网站制作、网站设计、外贸网站建设、察隅网络推广、微信小程序定制开发、察隅网络营销、察隅企业策划、察隅品牌公关、搜索引擎seo、人物专访、企业宣传片、企业代运营等,从售前售中售后,我们都将竭诚为您服务,您的肯定,是我们最大的嘉奖;创新互联为所有大学生创业者提供察隅建站搭建服务,24小时服务热线:13518219792,官方网址:www.cdcxhl.com
当运行任务的时候,nodemanager 或报出如下错误
java.lang.OutOfMemoryError: unable to create new native thread
解决方式:配置linux本身。
echo "100000" > /proc/sys/kernel/pid_max
echo "200000" > /proc/sys/vm/max_map_count
针对centos6.5,追加如下文件
vi /etc/security/limits.d/90-nproc.conf
* soft nproc unlimited
root soft nproc unlimited
追加如下内容
/etc/security/limits.conf
* soft nofile 65535
* hard nofile 65535
* hard nproc 100000
* soft nproc 100000
ulimit -a 需要配置如下:
例如open files
max user processes
/home/game/.bash_profile 最后一行放
ulimit -u 65535
[ @ sbin]$ ulimit -a
core file size (blocks, -c) 0
data seg size (kbytes, -d) unlimited
scheduling priority (-e) 0
file size (blocks, -f) unlimited
pending signals (-i) 514847
max locked memory (kbytes, -l) 64
max memory size (kbytes, -m) unlimited
open files (-n) 65535
pipe size (512 bytes, -p) 8
POSIX message queues (bytes, -q) 819200
real-time priority (-r) 0
stack size (kbytes, -s) 10240
cpu time (seconds, -t) unlimited
max user processes (-u) 65535
virtual memory (kbytes, -v) unlimited
file locks (-x) unlimited
以上是“hadoop cdh5.1对centos系统本身的配置要求是什么”这篇文章的所有内容,感谢各位的阅读!相信大家都有了一定的了解,希望分享的内容对大家有所帮助,如果还想学习更多知识,欢迎关注创新互联行业资讯频道!