Chinaunix首页 | 论坛 | 博客
  • 博客访问: 1185233
  • 博文数量: 259
  • 博客积分: 10
  • 博客等级: 民兵
  • 技术积分: 2518
  • 用 户 组: 普通用户
  • 注册时间: 2012-10-13 16:12
个人简介

科技改变世界,技术改变人生。

文章分类

全部博文(259)

发布时间:2015-06-30 15:08:21

文章转载:http://www.aboutyun.com/thread-14024-1-1.html<br /><br /><br />前期准备工作(系统环境搭建)<br />操作系统:CentOS 6.5 x64<br />CPU*2 64G 300G*4<br />所需软件&nbsp; cloudera-manager-el6-cm5.3.4_x86_64.tar.gz、mysql-connector-java-5.1.25-bin.jar<br />1、设置静态IP地址<br /><br />vi .........【阅读全文】

阅读(2140) | 评论(0) | 转发(0)

发布时间:2015-06-05 10:40:13

Google File System中文版Google Bigtable中文版Google MapReduce中文版......【阅读全文】

阅读(2703) | 评论(0) | 转发(0)

发布时间:2015-05-18 16:36:29

今天测试HDFS群集active和standby切换,过程中出现了两个standby模式,运行hadoop命令出现如下报错,15/05/18 16:31:12 INFO retry.RetryInvocationHandler: Exception while invoking getFileInfo of class ClientNamenodeProtocolTranslatorPB over Master1/192.168.19.194:9000 after 13 fail over attempts. Trying to.........【阅读全文】

阅读(4988) | 评论(0) | 转发(0)

发布时间:2015-05-12 14:08:12

今天安装调试hadoop2.5.2 的时候运行wordcount例子,报错如下:[root@Master sbin]# hadoop jar /usr/local/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.5.2.jar wordcount /input /output15/05/12 13:50:12 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... usi.........【阅读全文】

阅读(2939) | 评论(0) | 转发(0)

发布时间:2015-05-12 11:08:15

hadoop在安装的时候,需要知道hadoop版本是32位还是64位。hadoop官网原来提供的都是32位,因为我们大部分服务器都是64位,所以不得不重新编译。后来官网从hadoop2.5版本开始就提供了64位。我们来从官网下载的hadoop2.4.1安装包.hadoop是32位还是64位,我们查看本地库即可。即进入$hadoop_home/lib/native,使用file命.........【阅读全文】

阅读(3571) | 评论(0) | 转发(0)

发布时间:2015-05-04 13:52:06

近期帮助一个朋友解决eclipse hadoop连接问题run as hadoop方式,(hadoop 2.X  Eclipse 4.5.X)报错信息:error:call from alia-pc/192.168.111.1 to 192.168.1.73:9000 failed on connection exception:java.net.Connection:Connection refused:no further.........【阅读全文】

阅读(5914) | 评论(0) | 转发(0)

发布时间:2015-04-30 15:30:44

配置hadoop-eclipse开发环境(Version: 3.4.1 and hadoop-1.2.1)hadoop-eclipse-1.2.1 插件需要自行编译,所以为了图省事而从网上直接下载了这个jar包,下载资源。下载这个jar包后,将它放置在eclipse/plugins目录下,并重启eclipse即可。如果你需要自己编译该插件,网上搜索下。.........【阅读全文】

阅读(2306) | 评论(0) | 转发(0)

发布时间:2015-04-14 14:32:29

近期帮助一个朋友解决一个报错,在启动hadoop的时候报错,如下:Exception in thread "main" java.lang.NoClassDefFoundError: javax/net/SocketFactory        at java.lang.ClassLoader.defineClass1(Native Method)        at java.lang.ClassLoader.defineClassCond(ClassL.........【阅读全文】

阅读(2275) | 评论(0) | 转发(0)

发布时间:2015-04-13 17:31:30

最近帮助一个朋友查看hadoop2.6.0部署的问题,群集可以正常启动,但运行mapreduce wordcount时候,报错误error:Container exited with a non-zero exit code 127找了一天的原因,才发现core-site.xml中<property>       <name>hadoop.tmp.dir</name>       <v.........【阅读全文】

阅读(10506) | 评论(0) | 转发(0)

发布时间:2015-04-09 00:39:39

清洗数据写好代码后,运行报错:ERROR org.apache.hadoop.mapred.TaskTracker: Can not start task tracker because java.io.IOException: Failed to set permissions of path: \tmp\hadoop-****** to 0700 at org.apache.hadoop.fs.FileUtil.checkReturnValue(FileUtil.java:682) at org.apache.hadoop.fs..........【阅读全文】

阅读(2600) | 评论(0) | 转发(0)
给主人留下些什么吧!~~
留言热议
请登录后留言。

登录 注册