1,打开的文件描述符数
ulimit -n 10240 (默认是1024)
否则可能导致:Exception increateBlockOutputStream java.io.EOFException
2,用户可以启动最大的进程数
ulimit -u 10240
可以用lsof命令查看打开的文件句柄和进程。
3,配置hdfs里面datanode的同时处理文件数,hdfs-site.xml
- dfs.datanode.max.xcievers
- 4096
-
阅读(4154) | 评论(1) | 转发(0) |