Chinaunix首页 | 论坛 | 博客
  • 博客访问: 402153
  • 博文数量: 162
  • 博客积分: 0
  • 博客等级: 民兵
  • 技术积分: 1501
  • 用 户 组: 普通用户
  • 注册时间: 2016-10-21 19:45
文章分类
文章存档

2018年(1)

2017年(101)

2016年(60)

发布时间:2017-01-07 12:40:11

1. copyFromLocal  hadoop dfs -ls 输出:-rw-r--r-- 3 hduser supergroup 674566 2011-03-10 11:38 /user/hduser/gutenberg/pg20417.txt -rw-r--r-- 3 hduser supergroup 1423801 2011-03-10 11:38 /user/hduser/gutenberg/pg5000.txt3.rmr 删除文件夹  hadoop dfs -rmr /user/hduser.........【阅读全文】

阅读(951) | 评论(0) | 转发(0)

发布时间:2017-01-07 12:29:21

1.启动hadoop, start-all.sh 启动hadoop2. copy local example data to hdfs     bin/hadoop jar contrib/streaming/hadoop-*streaming*.jar -file /home/hduser/reducer.py -reducer /home/hduser/reducer.py  bin/hadoop dfs -cat /user/hduser/gutenberg-output/part-00000......【阅读全文】

阅读(1787) | 评论(0) | 转发(0)

发布时间:2017-01-06 23:45:06

1. 安装Java环境并配置好环境变量    export JAVA_HOME=/opt/java    export CLASSPATH=$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/jre/lib    export PATH=$JAVA_HOME/bin:$JAVA_HOME/jre/bin:$PATH:$HOME/bin2. 新建用户组及用户名 (用于隔离环境) .........【阅读全文】

阅读(925) | 评论(0) | 转发(0)
给主人留下些什么吧!~~
留言热议
请登录后留言。

登录 注册