按类别查询搜索结果
关于关键词 的检测结果,共 1134
niao5929 | 2015-08-13 22:03:25 | 阅读(980) | 评论(0)
把最近经常使用的Hadoop,Ceph的命令总结一下,很实用。


Hadoop【阅读全文】
安浪天 | 2015-08-12 11:04:27 | 阅读(1260) | 评论(0)
问题:hadoop安装完以后,经常会提示一下警告:<br /><span style="color:#E53333;">WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable</span><br />原因:这是32位的hadoop,安装在了64位的linux系统上<br />解决办法:<br />&nbs...【阅读全文】
安浪天 | 2015-08-11 15:07:20 | 阅读(990) | 评论(0)
说明:系统为centos6.5、jdk版本为1.7、Hadoop版本为2.7.红色字体为输入内容,紫色字体为路径及注意<strong><br />一、jdk安装<br /></strong>1、安装jdk1.7<br />&nbsp; &nbsp; <span style="color:#E53333;">rpm -ivh jdk-7u79-linux-x64.rpm</span><br /><div>2、配置环境变量 &nbsp;&nbsp;&nbsp;在/etc/profile文...【阅读全文】
xuemling | 2015-08-11 10:36:23 | 阅读(2870) | 评论(0)
HadoopHA【一】 hadoop配置文件详解【阅读全文】
shenyanxxxy | 2015-08-10 22:39:54 | 阅读(11120) | 评论(0)
把最近经常使用的Hadoop,Ceph的命令总结一下,很实用。


Hadoop【阅读全文】
【大数据】 Docker安装Hadoop集群
niao5929 | 2015-08-10 20:06:23 | 阅读(460) | 评论(0)
<div style="font-size:12px;color:#333333;font-family:tahoma, 宋体;line-height:normal;white-space:normal;text-align:center;background-color:#FAFAFC;"><h1 class="aTitle" style="font-size:16px;position:relative;padding-top:10px;">Docker安装Hadoop集群</h1></div><table width="97%" align="center...【阅读全文】
HOPE_DBA | 2015-08-10 16:02:44 | 阅读(380) | 评论(0)
安装Hadoop并不困难,官方文档也给的还算详细。最近同事练习安装还是会遇到一些问题,最后我们整理出来傻瓜版安装手册,帮助你0基础成功。北京数据平台荣誉出品<img class="zoom" id="aimg_E4SMD" alt="" src="" border="0" lazyloaded="true" file="http://www.linezing.com/blog/wp-content/uploads/2011/05/wlEmoticon-s...【阅读全文】
dsy851009 | 2015-08-08 21:48:36 | 阅读(3140) | 评论(0)
本来想着很简单的一个安装,结果花费了一天时间才搞定,中间遇到很多问题,最终安装成功,记录下。
安装步骤简单说下(网上有很多安装详细步骤,这里不详细说明,主要是中间的问题解决):
一、安装jdk1.7,配置环境变量;
二、下载cygwin并安装,记得记得选择openssh包的安装;
三、配置ssh;【阅读全文】
levy-linux | 2015-08-06 18:12:31 | 阅读(1580) | 评论(0)
我们有一个Hadoop集群从上个月开始遇到一系列性能问题,在逐一解决的过程中,积累了以下的优化经验。<br /><br />1. 网络带宽<br /><br />Hadoop集群的服务器在规划时就在统一的交换机下,这是在官方文档中建议的部署方式。<br /><br />但是我们的这台交换机和其他交换机的互联带宽有限,所以在客户端遇到了HDFS访问...【阅读全文】
levy-linux | 2015-08-06 17:58:10 | 阅读(1530) | 评论(0)
添加节点

1.修改host
和普通的datanode一样。添加namenode的ip

2.修改namenode的配置文件conf/slaves
添加新增节点的ip或host

3.在新节点的机器上,启动服务
[root@slave-004 hadoop]# ./bin/hadoop-daemon.sh start datanode
[root@slave-004 hadoop...【阅读全文】
dirk2014 | 2015-08-06 13:30:13 | 阅读(590) | 评论(0)
一、简介        Hadoop是一个分布式系统基础架构,由Apache基金会开发。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力高速运算和存储。简单地说来,Hadoop是一个可以更容易开发和运行处理大规模数据的软件平台。图1 Hadoop主要项目 &...【阅读全文】
dirk2014 | 2015-08-06 13:27:27 | 阅读(540) | 评论(0)
   由于手头项目的原因,需要在Hadoop框架之上架设运行Sleuthkit,虽然说是完成项目,自己希望每次参与项目知识结构或者思考方法都能有所提升。这次项目自己希望可以对现在流行的Hadoop框架和取证工具Sleuthkit有所积累。   Hadoop用于架设分布式系统。一般来说,实现多个系统并行计算需要考虑许多细...【阅读全文】
dirk2014 | 2015-08-06 13:22:00 | 阅读(480) | 评论(0)
Hadoop简介        Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统(HDFS,Hadoop Distributed Filesystem)和MapReduce(Google MapReduce的开源实现)为核心的Hadoop为用户提供了系统底层细节透明的分布式基础架构。对于Hadoop的集群来讲,...【阅读全文】
dirk2014 | 2015-08-06 13:17:12 | 阅读(660) | 评论(0)
在ubuntu上将hadoop安装及配置完毕后,接下来的工作就是在eclipse下配置开发hadoop应用程序的环境。目的很简单,为进行研究与学习,部署一个hadoop运行环境,并搭建一个hadoop开发与测试环境。环境:virtualbox  和  ubuntu12.04第一步:下载eclipse-jee-juno-SR1-linux-gtk.tar.gz.     注...【阅读全文】
【大数据】 hadoop distcp FAQ
wenhq | 2015-08-06 11:55:34 | 阅读(1520) | 评论(0)
<span style="font-family:Verdana, Helvetica, sans-serif;font-size:12.8000001907349px;line-height:15.3599996566772px;white-space:normal;background-color:#FFFFFF;">&nbsp;</span><span style="line-height:15.3599996566772px;white-space:normal;background-color:#FFFFFF;font-size:14.0799999237061px;"><span ...【阅读全文】
OowarrioroO | 2015-08-05 22:56:21 | 阅读(1230) | 评论(0)
setup cluster -- configure hadoop
scp the directory to all the other machines
install hadoop and configure the file
down the hadoop package
install jdk【阅读全文】
xiong9937 | 2015-07-31 16:20:42 | 阅读(1210) | 评论(0)
【服务器与存储】 Hadoop中的RPC实现(概述)
xiong9937 | 2015-07-31 16:19:45 | 阅读(1210) | 评论(0)
xiong9937 | 2015-07-31 16:18:48 | 阅读(0) | 评论(0)
mingfei10 | 2015-07-28 16:31:25 | 阅读(1230) | 评论(0)

mapper.sh
点击(此处)折叠或打开...【阅读全文】