Chinaunix首页 | 论坛 | 博客
  • 博客访问: 31440
  • 博文数量: 12
  • 博客积分: 0
  • 博客等级: 民兵
  • 技术积分: 10
  • 用 户 组: 普通用户
  • 注册时间: 2011-03-21 11:17
文章分类
文章存档

2013年(12)

我的朋友

分类: HADOOP

2013-08-23 15:59:34

  1.安装ssh
  2.安装resync
  3.配置ssh免密码登录
            
  1. ssh-keygen -t rsa -P ""

  1. cd ~/.ssh
  2. cat id_rsa.pub >> authorized_keys



  1. 登录localhost;

  2. ssh localhost


  1. 执行退出命令:
  2. exit;

4.配置jdk命令,下载hadoop1.0.3到工作目录
hadoop.apache.org
(1.2.4做过android的基本不用配置)

5.修改hadoop配置文件


  1. vim conf/hadoop.sh
  2. export JAVA_HOME=(your java_home path)

6.修改hadoop核心配置文件
conf/core-site.xml
配置fdfs的地址和端口号

点击(此处)折叠或打开

  1. <configuration>
  2.         <property>
  3.                  <name>fs.default.name</name>
  4.                  <value>hdfs://localhost:9000</value>
  5.          </property>
  6. </configuration>
7.修改hadoop配置,修改replication
conf/hdfs-site.xml
配置block的备份个数,因为是单节点,所以就写为1



  1. <configuration>
  2.         <property>
  3.                 <name>dfs.replication</name>
  4.                 <value>1</value>
  5.         </property>
  6. </configuration>

8.修改hadoop中mapreduce配置文件,配置的是jobtracker的地址和端口
conf/mared-site.xml

  1. <configuration>
  2.         <property>
  3.                 <name>mapred.job.tracker</name>
  4.                 <value>localhost:9001</value>
  5.         </property>
  6. </configuration>
9.格式化hadoop文件系统hdfs
hadoop文件夹下的bin目录

  1. ./hadoop namenode -format
10.启动文件系统
同样是在hadoop文件夹下的bin目录


  1. ./start_all.sh

最后,验证hadoop是否正确安装,打开浏览器,分别输入
(mapreduce 的web页面)
(hdfs 的web页面)

都能看见,则说明安装成功

 
阅读(1798) | 评论(0) | 转发(0) |
0

上一篇:puppet之zabbix配置过程之一

下一篇:没有了

给主人留下些什么吧!~~