专注点,细心点,耐心点 知行合一
发布时间:2014-05-09 14:07:34
1) JDK 1.6或更新版本(本文使用JDK1.7,请不要安装JDK1.8版本,JDK1.8和Hadoop 2.4.0不匹配,编译Hadoop 2.4.0源码时会报很多错误)2) Maven 3.0或更新版本3) ProtocolBuffer 2.5.04) CMake 2.6或更新版本/etc/profileexport M2.........【阅读全文】
发布时间:2013-01-12 19:32:35
FS Shell 调用文件系统(FS)Shell命令应使用 bin/hadoop fs <args> 的形式。 所有的的FS shell命令使用URI路径作为参数。URI格式是scheme://authority/path 。对 HDFS文件系统,scheme是hdfs ,对本地文件系统,scheme是file 。其中scheme和 authority参数都是可选的,如果未加指定,就会使用配置中指定的默认scheme。一个HDFS文件或目录比如/parent/child可 以表示成hdfs://namenode:namenodepo......【阅读全文】
发布时间:2013-01-12 15:42:46
Hadoop安装简单版操作系统环境: Linux ubuntu 3.2.0-23-generic-paeHadoop版本: hadoop-1.0.3master: 192.168.1.2slaver: 192.168.1.3一, SSH免密码 通过ssh-keygen产生公私钥,将公钥copy到希望免ssh密码登陆的机子上。 master上操作: su hadoop cd /home/hadoop ssh-keygen -t rsa -P '' cat .ssh/id_rsa.pub >> ......【阅读全文】