发布时间:2013-08-08 09:39:00
3、HDFS添加节点现有环境如下:192.168.30.203 hdnode1192.168.30.204 hdnode2192.168.30.205 hdnode3其中hdnode1是namenode,hdnode2和hdnode3是datanode我们要新增加两个datanode:192.168.30.206 hdnode4192.168.30.207 hdnode5那.........【阅读全文】
发布时间:2013-08-08 09:38:37
2、MapReduce功能测试MapReduce原理大致明白了,可现在仍不知从何处入手咋整呐,还好还好,hadoop自带了几个jar包可用于测试:[grid@hdnode1 hadoop-0.20.2]$ ll *.jar-rw-rw-r-- 1 grid grid 6839 Feb 19 2010&nbs.........【阅读全文】
发布时间:2013-08-08 09:38:20
5、配置javadocIDE工具之所以易用,就是辅助功能做的好。在开发代码时,能够减化操作,或者提供帮助。比如javadoc功能,方便我们快速查询方法相关描述、示例等帮助信息,那么对于新引入的HADOOP相关包有没有javadoc支持呢?回答是肯定的,HADOOP软件包中就带有这些内容,位于HADOOP软件根路径的docs目录下。若要.........【阅读全文】
发布时间:2013-08-08 09:36:42
考虑到Windows平台尽管界面友好,但Hadoop环境配置较"怪异",需借助cygwin,这个过程并不优雅。正好我手上另有一套ubuntu环境,用着也很顺手,就在ubuntu中安装了Eclipse IDE,在这套环境中配置安装Hadoop开发环境。在本地搭建HADOOP开发环境时,三思也在网上参考了很多文章,还是很有感触,一个是果然天下文章.........【阅读全文】