搜索博文结果_ChinaUnix博客

zzjlzx | 2013-11-29 14:50:29 | 阅读(4540) | 评论(0)

看文件信息hadoop fsck /user/filename更详细的。 -racks 是显示机架位置hadoop fsck /user/filename -files -blocks -locations -racks -files 文件分块信息，-blocks 在带-files参数后才显示block信息-locations 在带-blocks参数后才显示block块所在datanode的具...【阅读全文】

【HADOOP】 hadoop集群安装步骤

Larpenteur | 2013-11-14 11:30:24 | 阅读(650) | 评论(0)

一、环境准备阶段：假设你需要配置集群的设备有5台：分别为master,slave1,slave2,slave3,slave4；1、每台机器都创建一个账户hadoop;2、修改每台机器的主机名：/etc/sysconfig/network 如master的机器：NETWORKING=yesHOSTNAME=master（这个名字可以随便起，方便记忆）slave1：NETWORKING=yesHOSTNAME=slave1...【阅读全文】

【HADOOP】 hadoop集群安装步骤

niao5929 | 2013-11-13 10:18:43 | 阅读(610) | 评论(0)

一、环境准备阶段：假设你需要配置集群的设备有5台：分别为master,slave1,slave2,slave3,slave4；1、每台机器都创建一个账户hadoop;2、修改每台机器的主机名：/etc/sysconfig/network 如master的机器：NETWORKING=yesHOSTNAME=master（这个名字可以随便起，方便记忆）slave1：NETWORKING=yesHOSTNAME=slave1...【阅读全文】

【HADOOP】 hadoop集群安装步骤

dsy851009 | 2013-11-12 18:59:20 | 阅读(9830) | 评论(1)

一、环境准备阶段：假设你需要配置集群的设备有5台：分别为master,slave1,slave2,slave3,slave4；1、每台机器都创建一个账户hadoop;2、修改每台机器的主机名：/etc/sysconfig/network 如master的机器：NETWORKING=yesHOSTNAME=master（这个名字可以随便起，方便记忆）slave1：NETWORKING=yesHOSTNAME=slave1...【阅读全文】

【HADOOP】 hive大数据除重问题研究

冻豆腐132 | 2013-11-06 09:11:31 | 阅读(520) | 评论(0)

hive大数据除重问题研究存量表： store增量表: incre 字段：1. p_key 除重主键2. w_sort 排序依据3. info 其他信息 ?12...【阅读全文】

【HADOOP】 Hadoop集群

蓝天上的青鸟 | 2013-10-27 15:27:14 | 阅读(1930) | 评论(0)

Hadoop集群安装配置【阅读全文】

【HADOOP】 Zookeeper分布式集群部署

Benquike | 2013-10-24 13:43:29 | 阅读(860) | 评论(0)

部署完成Hadoop/Hbase集群之后，开始测试Sleuthkit，结果发现tpkickoff.sh运行时不断提醒zookeeper的连接错误：Session 0x0 for server。网上大部分的资料说问题出在DNS的解析上，需要去修改/etc/hosts文件，但是之前部署分布式的时候这个文件就已经设置好了，所以问题应该不是在这里。于是考虑这个奇...【阅读全文】

【HADOOP】 Zookeeper分布式集群部署

Larpenteur | 2013-10-24 11:47:52 | 阅读(410) | 评论(0)

部署完成Hadoop/Hbase集群之后，开始测试Sleuthkit，结果发现tpkickoff.sh运行时不断提醒zookeeper的连接错误：Session 0x0 for server。网上大部分的资料说问题出在DNS的解析上，需要去修改/etc/hosts文件，但是之前部署分布式的时候这个文件就已经设置好了，所以问题应该不是在这里。于是考虑这个奇...【阅读全文】

【HADOOP】 Zookeeper分布式集群部署

windhawkgyang | 2013-10-22 15:11:32 | 阅读(31760) | 评论(0)

部署完成Hadoop/Hbase集群之后，开始测试Sleuthkit，结果发现tpkickoff.sh运行时不断提醒zookeeper的连接错误：Session 0x0 for server。网上大部分的资料说问题出在DNS的解析上，需要去修改/etc/hosts文件，但是之前部署分布式的时候这个文件就已经设置好了，所以问题应该不是在这里。于是考虑这个奇...【阅读全文】

【HADOOP】 Hadoop集群完全分布式模式环境部署

鸟哥のlinux | 2013-09-13 17:24:14 | 阅读(58704) | 评论(3)

Hadoop简介 Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统（HDFS，Hadoop Distributed Filesystem）和MapReduce（Google MapReduce的开源实现）为核心的Hadoop为用户提供了系统底层细节透明的分布式基础架构。对于Hadoop的集群来讲，...【阅读全文】

【HADOOP】部署Hadoop集群的步骤

Larpenteur | 2013-08-12 23:47:27 | 阅读(510) | 评论(0)