按类别查询搜索结果
关于关键词 "HADOOP" 的检测结果,共 73
chengxuyonghu | 2017-03-23 14:08:05 | 阅读(170) | 评论(0)
Pig一种操作hadoop的轻量级脚本语言,最初又雅虎公司推出,不过现在正在走下坡路了。当初雅虎自己慢慢退出pig的维护之后将它开源贡献到开源社区由所有爱好者来维护。不过现在还是有些公司在用,不过我认为与其使用pig不如使用hive。:)Pig是一种数据流语言,用来快速轻松的处理巨大的数据。Pig包含两个部分...【阅读全文】
【系统运维】 hadoop2.6 HA部署
chengxuyonghu | 2017-03-05 15:47:21 | 阅读(330) | 评论(0)
硬件环境:四台虚拟机,hadoop1~hadoop4,3G内存,60G硬盘,2核CPU软件环境:CentOS6.5,hadoop-2.6.0-cdh5.8.2,JDK1.7部署规划:hadoop1(192.168.0.3):namenode(active)、resourcemanagerhadoop2(192.168.0.4):namenode(standby)、journalnode、datanode、nodemanager、historyserver...【阅读全文】
【系统运维】 安装hadoop+zookeeper
chengxuyonghu | 2017-02-08 10:37:42 | 阅读(190) | 评论(0)
chengxuyonghu | 2017-01-24 16:41:02 | 阅读(200) | 评论(0)
一、安装JDK1.7 JDK下载地址:http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html下载后安装[plain] copy rpm -ivh jdk-8u112-linux-x64.rpm  设置JDK环境变量[plain] copy ...【阅读全文】
xiaomabetter | 2016-09-09 18:42:37 | 阅读(0) | 评论(0)
???????????????elk+redis???????????????????????????????els+kafka+rsyslog+hadoop-hdfs+zookeeper??????????????  ??????????A.rsyslogd???? ????? rsyslog?????? ??,??? rsyslog?? kafka??????? v8.7.0?汾???????????.??? ChangeLog ???????? V8.X??汾?仯. ????V8??????????RPM????Rsyslog-kafka??????,???yum???????,????yum???...【阅读全文】
【系统运维】 hadoop 常用命令
海峡 | 2016-04-22 14:01:04 | 阅读(760) | 评论(0)
Hadoop dfs –ls就是查看/usr/root目录下的内容,默认如果不填路径这就是当前用户路径;Hadoop dfs –rmr xxx就是删除目录,还有很多命令看看就很容易上手;Hadoop dfsadmin –report这个命令可以全局的查看DataNode的情况;Hadoop job后面增加参数是对于当前运行的Job的操作,例如list,kill等;...【阅读全文】
【系统运维】 Redhat 下hadoop简单搭建
foreverxp0 | 2016-03-16 21:51:14 | 阅读(1200) | 评论(0)
一   hadoop简介 Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。        Hadoop实现了一个分布式文件系统(Hadoop Distributed File System...【阅读全文】
niao5929 | 2015-11-04 19:00:10 | 阅读(450) | 评论(0)
CentOS7安装Hadoop2.7完整步骤[日期:2015-11-04]来源:Linux社区  作者:Linux[字体:大 中 小]总体思路,准备主从服务器,配置主服务器可以无密码SSH登录从服务器,解压安装JDK,解压安装Hadoop,配置hdfs、mapreduce等主从关系。...【阅读全文】
linux一叶 | 2015-08-28 22:26:46 | 阅读(480) | 评论(0)
把最近经常使用的Hadoop,Ceph的命令总结一下,很实用。


Hadoop【阅读全文】
Larpenteur | 2015-08-20 01:17:57 | 阅读(820) | 评论(0)
把最近经常使用的Hadoop,Ceph的命令总结一下,很实用。


Hadoop【阅读全文】
niao5929 | 2015-08-13 22:03:25 | 阅读(370) | 评论(0)
把最近经常使用的Hadoop,Ceph的命令总结一下,很实用。


Hadoop【阅读全文】
kaopuso | 2015-08-12 12:15:48 | 阅读(0) | 评论(0)
把最近经常使用的Hadoop,Ceph的命令总结一下,很实用。


Hadoop【阅读全文】
shenyanxxxy | 2015-08-10 22:39:54 | 阅读(9290) | 评论(0)
把最近经常使用的Hadoop,Ceph的命令总结一下,很实用。


Hadoop【阅读全文】
niao5929 | 2015-08-10 12:55:50 | 阅读(200) | 评论(0)
<div style="font-size:12px;color:#333333;font-family:tahoma, 宋体;line-height:normal;white-space:normal;text-align:center;background-color:#FAFAFC;"><h1 class="aTitle" style="font-size:16px;position:relative;padding-top:10px;">Hadoop2.6+HA+Zookeeper3.4.6+HBase1.0.0集群安装</h1></div><table ...【阅读全文】
plumxx99 | 2015-07-20 14:27:01 | 阅读(1120) | 评论(0)
在上篇博文搭建完成后,这篇博文继续介绍针对与hdfs的操作<br />运行 bin/目录的 hadoop 命令,可以查看 Haoop 所有支持的操作及其用法,这里以几个简单的操作为例。建立目录:<br />[hadoop@server1 hadoop-1.2.1]$ bin/hadoop dfs -mkdir testdir<br /><br />在 HDFS 中建立一个名为 testdir 的目录,复制文件<br />[had...【阅读全文】
hrsjw1 | 2015-06-25 16:26:38 | 阅读(490) | 评论(0)

DNS服务器:dnsmasq apt-get  updateapt...【阅读全文】
niao5929 | 2015-06-19 09:00:37 | 阅读(550) | 评论(0)
CentOS配置Hadoop环境变量[日期:2015-06-15]来源:Linux社区  作者:fantasydreams[字体:大 中 小]CentOS7 && Hadoop-2.7.0.tar.gzHadoop基于java环境,所以需要配置jdk。 1、配置jdk: http://www.linuxid...【阅读全文】
niao5929 | 2015-05-09 22:36:12 | 阅读(350) | 评论(0)
Hadoop2.6集群环境搭建(伪分布式)[日期:2015-05-09]来源:Linux社區  作者:myresearch[字体:大 中 小]以前安装过Hadoop几个版本的单机版,主要是为了研究Hadoop源代码,现在想更加深入Hadoop整个生态系统,选择安装Hadoop完全分...【阅读全文】
【系统运维】 Ganglia监控 hadoop 集群
hrsjw1 | 2015-04-24 15:52:38 | 阅读(840) | 评论(0)
 参考:http://www.cnblogs.com/Richardzhu/p/3481996.htmlhttp://blog.csdn.net/pirate_g/article/details/8463395环境:服务器名称角色IPClient监控节点10.0.2.59nn01被监控10.0.2.220jt01被监控10.0.2.219dn01被监控10.0.2.216hadoop 集群(nn01,jt01,dn01),监控节...【阅读全文】
niao5929 | 2015-04-14 10:12:11 | 阅读(380) | 评论(0)
Hadoop文件损坏解决办法[日期:2015-04-14]来源:Linux社区  作者:weiweiyixiao[字体:大 中 小]今天把集群重新扩容了一下,把之前的两台电脑重新装了系统,结果启动Hadoop发现报错了。 问题原因:在hdfs-site中配置...【阅读全文】