阿里巴巴是个快乐的青年
发布时间:2014-03-04 19:38:12
一、环境配置 这里选择的环境是hadoop-0.20.2和hbase-0.90.4,Hadoop环境配置参看这里,HBase环境配置请看这里。 需要注意的是,本文的需求是在Hadoop上跑MapReduce job来分析日志并将结果持久化到HBase,所以,在编译程序时,Hadoop需要用到.........【阅读全文】
发布时间:2014-02-28 18:17:06
一、安装 一般HBase最终都会需要与Hadoop集群整合在一起,所以Hadoop版本对HBase部署非常关键,不合适的Hadoop和HBase版本是无法工作的,Hadoop与HBase版本对应关系如下:Table 2.1. Hadoop version support matrix HBa.........【阅读全文】
发布时间:2014-02-26 19:33:15
一、前言 由于后知后觉,以至于此时才开始Hadoop之旅,但《Hadoop权威指南》之类的教程以不能与时俱进,在Hadoop 2.2.0横行的今日难觅可运行只配置,遂想仍以《Hadoop权威指南》为蓝本把玩怀旧版Hadoop-0.20.2。Hadoop-0.20.2已不能从官网的DownLoad中找到,需要从归档地址下载,点.........【阅读全文】
发布时间:2014-02-23 17:46:47
一、简介 rz,sz是Linux/Unix同Windows进行ZModem文件传输的命令行工具。 优点:比ftp命令方便,而且服务器不用打开FTP服务。 sz:将选定的文件发送(send)到本地机.........【阅读全文】
发布时间:2014-02-23 17:42:12
这里的开发环境是指:Hadoop集群安装在Linux下,本地开发环境在Windows下用Hadoop-eclipse-plugin,远程连接Linux运行job。一、安装 Hadoop集群安装配置请参看这里,Java与Eclipse的安装配置请参看这里,下面介绍Hadoop-eclipse-p.........【阅读全文】