科技改变世界,技术改变人生。
发布时间:2015-03-30 14:48:51
eclipse 向HDFS中写入文件报写入权限的问题,因为只是自己练习java编程,将hadoop HDFS 文件设置为777的权限,正常的情况可以将自己用的开发笔记本administrator用户修改为hadoop的用户,这样执行就没有问题了。org.apache.hadoop.security.AccessControlException:Permission denied:user=Administrator,access=WRITE,i.........【阅读全文】
发布时间:2015-03-17 16:03:35
IOUtils.copyBytes(in, System.out, 1024,true); 提示The type java.lang.Object cannot be resolved. It is indirectly referenced from required .class files错误。一:It is indirectly referenced from required .class file原因:你正要使用的类调用了另一个类,而这个类又调用了其他类,这种关系可能会有好多层.........【阅读全文】
发布时间:2015-01-07 17:18:02
1、dfs.hosts 记录即将作为datanode加入集群的机器列表2、mapred.hosts 记录即将作为tasktracker加入集群的机器列表3、dfs.hosts.exclude mapred.hosts.exclude 分别包含待移除的机器列表4、master 记录运行辅助namenode的机器列表5、slave 记录运行datanode和tasktracker的机器列表6、hadoop-env.sh 记录脚本要用的环.........【阅读全文】
发布时间:2015-01-05 17:22:18
1、解决"no datanode to stop"问题jps 中看不到namenode删除/tmp 文件中 红色框 中的文件$rm -rf /usr/hadoop/tmp/*$rm -rf /tmp/hadoop*$hadoop namenode -format$start-all.sh......【阅读全文】
发布时间:2014-12-31 15:57:17
?Apache Hadoop: 是Apache开源组织的一个分布式计算开源框架,提供了一个分布式文件系统子项目(HDFS)和支持MapReduce分布式计算的软件架构。?Apache Hive: 是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表,通过类SQL语句快速实现简单的MapReduce统计,不必开发专门的MapReduce应用,十分适.........【阅读全文】