Chinaunix首页 | 论坛 | 博客
  • 博客访问: 2836099
  • 博文数量: 599
  • 博客积分: 16398
  • 博客等级: 上将
  • 技术积分: 6875
  • 用 户 组: 普通用户
  • 注册时间: 2009-11-30 12:04
个人简介

WINDOWS下的程序员出身,偶尔也写一些linux平台下小程序, 后转行数据库行业,专注于ORACLE和DB2的运维和优化。 同时也是ios移动开发者。欢迎志同道合的朋友一起研究技术。 数据库技术交流群:58308065,23618606

文章分类

全部博文(599)

文章存档

2014年(12)

2013年(56)

2012年(199)

2011年(105)

2010年(128)

2009年(99)

分类: HADOOP

2013-04-09 18:58:39

新搭建的4节点HADOOP集群,启动DATANODE失败,但是NAMENODE可以正常启动。
查询了一下DATANODE启动日志发现时由于权限位导致的。

[grid@sxzyxntest02 logs]$ view hadoop-grid-datanode-sxzyxntest02.log


2013-04-09 18:46:52,032 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: STARTUP_MSG:
/************************************************************
STARTUP_MSG: Starting DataNode
STARTUP_MSG:   host = sxzyxntest02/10.192.37.44
STARTUP_MSG:   args = []
STARTUP_MSG:   version = 1.0.4
STARTUP_MSG:   build = -r 1393290; compiled by 'hortonfo' on Wed Oct  3 05:13:58 UTC 2012
************************************************************/
2013-04-09 18:46:52,291 INFO org.apache.hadoop.metrics2.impl.MetricsConfig: loaded properties from hadoop-metrics2.properties
2013-04-09 18:46:52,309 INFO org.apache.hadoop.metrics2.impl.MetricsSourceAdapter: MBean for source MetricsSystem,sub=Stats registered.
2013-04-09 18:46:52,310 INFO org.apache.hadoop.metrics2.impl.MetricsSystemImpl: Scheduled snapshot period at 10 second(s).
2013-04-09 18:46:52,310 INFO org.apache.hadoop.metrics2.impl.MetricsSystemImpl: DataNode metrics system started
2013-04-09 18:46:52,412 INFO org.apache.hadoop.metrics2.impl.MetricsSourceAdapter: MBean for source ugi registered.
2013-04-09 18:46:52,476 WARN org.apache.hadoop.hdfs.server.datanode.DataNode: Invalid directory in dfs.data.dir: Incorrect permission for /cpic/grid/hadoop/data, expected: rwxr-xr-x, while actual: rwxrwxr-x
2013-04-09 18:46:52,476 ERROR org.apache.hadoop.hdfs.server.datanode.DataNode: All directories in dfs.data.dir are invalid.
2013-04-09 18:46:52,476 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: Exiting Datanode
2013-04-09 18:46:52,477 INFO org.apache.hadoop.hdfs.server.datanode.DataNode: SHUTDOWN_MSG:
/************************************************************
SHUTDOWN_MSG: Shutting down DataNode at sxzyxntest02/10.192.37.44
************************************************************/



[grid@sxzyxntest02 ~]$ ls -ld /cpic/grid/hadoop/data
drwxrwxr-x  2 grid grid 4096 Apr  9 17:37 /cpic/grid/hadoop/data
[grid@sxzyxntest02 ~]$ chmod 755 /cpic/grid/hadoop/data


[grid@sxzyxntest03 ~]$ ls -ld /cpic/grid/hadoop/data
drwxrwxr-x  2 grid grid 4096 Apr  9 17:37 /cpic/grid/hadoop/data
[grid@sxzyxntest03 ~]$ chmod 755 /cpic/grid/hadoop/data


[grid@sxzyxntest04 ~]$ ls -ld /cpic/grid/hadoop/data
drwxrwxr-x  2 grid grid 4096 Apr  9 17:37 /cpic/grid/hadoop/data
[grid@sxzyxntest04 ~]$ chmod 755 /cpic/grid/hadoop/data

重启HADOOP集群,问题搞定。

不过这个目录是HADOOP自动生成的,并没有事先创建好,很奇怪为何自动生成不顺便把权限位改了。


阅读(7090) | 评论(0) | 转发(1) |
给主人留下些什么吧!~~