按类别查询搜索结果
关于关键词 的检测结果,共 117
【HADOOP】 linux安装CDH5
hxl | 2015-04-27 14:48:00 | 阅读(6390) | 评论(0)
环境: OS:RadHat Linux As5CDH:5.3.2 1.安装步骤 1.1 节点角色分配 节点角色 ip hostname 主节点 ...【阅读全文】
fengzhanhai | 2015-04-21 13:10:15 | 阅读(4190) | 评论(2)
HBase是一个分布式的、面向列的开源数据库。HBase利用Hadoop HDFS作为其文件存储系统,MapReduce来处理HBase中的海量数据,利用Zookeeper作为协同服务。 HBase以表的形式存储数据。表有行和列组成。列划分为若干个列族/列簇(column family),列族下面包含若干列。本文主要是介绍分享一下在日常维护HBase时经常使用到的一些命令的心得和体会。【阅读全文】
fengzhanhai | 2015-04-20 17:56:46 | 阅读(2380) | 评论(0)
  今天刚安装好了hbase,通过Secure CRT登录hbase shell,敲入错误命令无法使用删除键(Backspace或是Ctrl+Backspace都不管用)删除,后来在终端-->仿真下选择 Linux问题解决,设置如下:删除键使用Ctrl+BackSpace-- The End --【阅读全文】
sittc2 | 2015-04-16 10:12:57 | 阅读(770) | 评论(0)
作为大数据核心技术,Hadoop为企业提供了高扩展、高冗余、高容错、和经济有效的“数据驱动”解决方案,针对企业目前普遍缺乏海量数据技术人员的现状,上海市信息技术培训中心Cloudera Hadoop认证培训系列课程,为企业经理、CTO、架构师、技术带头人、系统管理员、数据管理员、数据/商务分析元和应用开发人员带来了业内最...【阅读全文】
sittc2 | 2015-02-26 10:14:03 | 阅读(660) | 评论(0)
2015年上海市信息技术培训中心hadoop课程开班啦【阅读全文】
niao5929 | 2015-02-19 16:58:40 | 阅读(500) | 评论(0)
怎样控制namenode检查点的发生频率[日期:2015-02-18]来源:Linux社区  作者:xiaojiafei[字体:大 中 小]secondarynamenode节点定期访问namenode来进行镜像文件和编辑日志的备份,那么这个频率怎样修改呢?本实验是在《基...【阅读全文】
niao5929 | 2015-02-19 14:04:46 | 阅读(490) | 评论(0)
ZooKeeper伪分布式集群安装及使用[日期:2015-02-18]来源:Linux社区  作者:snwz[字体:大 中 小]1. zookeeper介绍ZooKeeper是一个为分布式应用所设计的分布的、开源的协调服务,它主要是用来解决分布式应用中经常遇到的一...【阅读全文】
cheyo | 2015-02-13 21:43:16 | 阅读(310) | 评论(0)
使用命令行编译打包运行自己的MapReduce程序(Hadoop 2.4.1)【阅读全文】
ningbohezhijun | 2015-02-09 11:53:59 | 阅读(430) | 评论(0)
我在看Hadoop实战第7章的时候,看到了关于使用压缩的好。我就按照书上输入文件的大小伪随机生成了近300M的文件(单词个数统计的hadoop输入),下面是生成输入的C++程序。点击(此处)折叠或打开/* * Author: tender * Created Time: 2015/2/9 10:31:20...【阅读全文】
ningbohezhijun | 2015-01-23 15:47:50 | 阅读(580) | 评论(0)
点击(此处)折叠或打开import org.apache.hadoop.fs.Path; import org.apache.hadoop.io.IntWritable;import org.apache.hadoop.io.LongWritable;import org.apache.hadoop.io.Text;import org.apache.hadoop.mapred.FileInputFormat;...【阅读全文】
sittc2 | 2015-01-04 14:54:20 | 阅读(520) | 评论(0)
作为大数据核心技术,Hadoop为企业提供了高扩展、高冗余、高容错、和经济有效的“数据驱动”解决方案,针对企业目前普遍缺乏海量数据技术人员的现状,上海市信息技术培训中心Cloudera Hadoop认证培训系列课程,为企业经理、CTO、架构师、技术带头人、系统管理员、数据管理员、数据/商务分析元和应用开发人员带来了业内最领...【阅读全文】
sittc2 | 2014-12-30 14:57:01 | 阅读(320) | 评论(0)
大数据时代已经悄然来临【阅读全文】
【HADOOP】 linux安装sqoop
hxl | 2014-12-03 09:23:50 | 阅读(4860) | 评论(0)
linux下安装sqoop环境:OS:Rad Hat Linux As5sqoop-1.4.5 1.下载安装介质,根据情况选择下载的版本,使用hadoop拷贝安装文件到usr1解压 [hadoop1@node1 usr1]$ tar -zxvfsqoop-1.4.5.bin__hadoop-1.0.0.tar.gz将hive用...【阅读全文】
hxl | 2014-11-28 17:32:10 | 阅读(0) | 评论(0)
点击(此处)折叠或打开#!/bin/shcurrent_sysdate=`date +"%Y-%m-%d %H:%M:%S"` dutyno=100statedate=$1month=`echo $statedate|cut -c1-6`year=`echo $...【阅读全文】
圣剑蓝骑士 | 2014-11-02 21:53:49 | 阅读(1710) | 评论(0)
转载自:http://www.cnblogs.com/beanmoon/archive/2013/01/05/2845579.html         由于hadoop主要是部署和应用在linux环境中的,但是目前鄙人自知能力有限,还无法完全把工作环境转移到linux中去(当然还有点小私心啦,windows下那么多好用的程序到linux下用不了还真有点...【阅读全文】
oLHHo | 2014-10-30 21:02:20 | 阅读(2350) | 评论(0)
第一步. 创建hadoop用户创建hadoop用户名与用户组运行命令su - root,注意,不是命令su root,后者不能携带root用户的参数信息,是不能执行创建用户组和用户命令的。创建组命令:groupaddhadoop 创建用户命令:useradd-g hadoop hadoop设置用户密码:passwdhadoop注意不能在/home目录下...【阅读全文】
hxl | 2014-10-28 17:36:13 | 阅读(33800) | 评论(0)
  下面是一个本地数据文件加载到hive表中的例子1.在hxl数据库下创建表hive> create table tb_emp_info    > (id int,    > name string,    > age int,    > tel string)    > ROW FORMAT DELIMITED    > FIEL...【阅读全文】
hxl | 2014-10-28 13:57:11 | 阅读(8660) | 评论(0)
  今天刚安装好了hbase,通过Secure CRT登录hbase shell,敲入错误命令无法使用删除键(Backspace或是Ctrl+Backspace都不管用)删除,后来在终端-->仿真下选择 Linux问题解决,设置如下:删除键使用Ctrl+BackSpace-- The End --【阅读全文】
圣剑蓝骑士 | 2014-10-16 22:23:37 | 阅读(2880) | 评论(0)
       hadoop.tmp.dir是hadoop文件系统依赖的基础配置,很多路径都依赖它。它默认的位置是在/tmp/{$user}下面,但是在/tmp路径下的存储是不安全的,因为linux一次重启,文件就可能被删除。           先说说,场景,在开发环境中,...【阅读全文】
tingfengjushi | 2014-09-03 16:06:24 | 阅读(1460) | 评论(0)
pig是一个框架,用来利用hadoop进行计算的框架,有自己的一套语法,可以非常方便的书写计算代码。简单使用过程:1.解压pig包,然后重新命名文件名2.进入配置文件conf/pig.properties的配置文件里面添加两行       fs.default.name=hdfs://had...【阅读全文】