搜索博文结果_ChinaUnix博客

Larpenteur | 2013-11-14 11:30:24 | 阅读(660) | 评论(0)

一、环境准备阶段：假设你需要配置集群的设备有5台：分别为master,slave1,slave2,slave3,slave4；1、每台机器都创建一个账户hadoop;2、修改每台机器的主机名：/etc/sysconfig/network 如master的机器：NETWORKING=yesHOSTNAME=master（这个名字可以随便起，方便记忆）slave1：NETWORKING=yesHOSTNAME=slave1...【阅读全文】

【HADOOP】 hadoop集群安装步骤

niao5929 | 2013-11-13 10:18:43 | 阅读(620) | 评论(0)

一、环境准备阶段：假设你需要配置集群的设备有5台：分别为master,slave1,slave2,slave3,slave4；1、每台机器都创建一个账户hadoop;2、修改每台机器的主机名：/etc/sysconfig/network 如master的机器：NETWORKING=yesHOSTNAME=master（这个名字可以随便起，方便记忆）slave1：NETWORKING=yesHOSTNAME=slave1...【阅读全文】

【HADOOP】 hadoop集群安装步骤

dsy851009 | 2013-11-12 18:59:20 | 阅读(9840) | 评论(1)

一、环境准备阶段：假设你需要配置集群的设备有5台：分别为master,slave1,slave2,slave3,slave4；1、每台机器都创建一个账户hadoop;2、修改每台机器的主机名：/etc/sysconfig/network 如master的机器：NETWORKING=yesHOSTNAME=master（这个名字可以随便起，方便记忆）slave1：NETWORKING=yesHOSTNAME=slave1...【阅读全文】

【NOSQL】如何理解Hadoop-Hbase原理与应用小结

qhw | 2013-11-12 18:18:28 | 阅读(5330) | 评论(0)

hbase【阅读全文】

【系统运维】 Hadoop分布式文件系统：架构和设计

wfeng | 2013-11-11 11:57:02 | 阅读(360) | 评论(0)

弁言 Hadoop散播式文件体系(。条件和计划方针硬件过错硬件过错是常态而不是非常。HDFS也许由成百上千的做事器所构成，每个做事器上存储着文件体系的部分数据。我们面对的实际是构成体系的组件数量是伟大...【阅读全文】

【HADOOP】 Hadoop如何实现关联计算

jiongtoast | 2013-11-05 08:39:29 | 阅读(790) | 评论(0)

hadoop如何实现关联计算。【阅读全文】

【C#/.net】用Aspose在Hadoop上处理Binary文件格式

mikez1026 | 2013-11-04 09:56:46 | 阅读(530) | 评论(0)

Apache Hadoop有通过其灵活的分布式文件系统（HDFS）跨节点奖大数据归档的强大能力。这个大数据解决方案还有着MapReduce Framework的技术支持，使开发人员能通过其APIs分析已归档的大数据。大数据可能是结构化或者非结构化的，并且可能以任意文件格式呈现。请记住，Aspose for Hadoop project的第一个版本已经发布，它让...【阅读全文】

【HADOOP】 Hadoop初探之Hadoop生态圈

Larpenteur | 2013-11-03 06:35:08 | 阅读(1000) | 评论(0)

一、简介 Hadoop是一个分布式系统基础架构，由Apache基金会开发。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力高速运算和存储。简单地说来，Hadoop是一个可以更容易开发和运行处理大规模数据的软件平台。图1 Hadoop主要项目 &...【阅读全文】

【HADOOP】 Hadoop初探之Hadoop生态圈

bluecom | 2013-10-31 23:36:35 | 阅读(380) | 评论(0)

一、简介 Hadoop是一个分布式系统基础架构，由Apache基金会开发。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力高速运算和存储。简单地说来，Hadoop是一个可以更容易开发和运行处理大规模数据的软件平台。图1 Hadoop主要项目 &...【阅读全文】

【HADOOP】 Hadoop初探之Hadoop生态圈

scq2099yt | 2013-10-30 23:18:44 | 阅读(40380) | 评论(1)

一、简介 Hadoop是一个分布式系统基础架构，由Apache基金会开发。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力高速运算和存储。简单地说来，Hadoop是一个可以更容易开发和运行处理大规模数据的软件平台。图1 Hadoop主要项目 &...【阅读全文】

【云计算】 hadoop配置之ssh无密码登录

niao5929 | 2013-10-30 09:26:18 | 阅读(1240) | 评论(0)

hadoop集群是一个动辄就几百几千机器的大集群，所以配置ssh无密码登录是很有必要的，下面来介绍一下配置说明：首先我们要下载ssh ：在命令行中键入“sudo apt-get install ssh”即可然后会在相应的目录下生成隐藏文件".ssh"，在.ssh文件中会有一个id_dsa文件，此文件就是私匙文件，我们要进行无密码登录就要设置公...【阅读全文】

【云计算】 hadoop配置之ssh无密码登录

1012191556 | 2013-10-29 21:18:11 | 阅读(5950) | 评论(0)

hadoop集群是一个动辄就几百几千机器的大集群，所以配置ssh无密码登录是很有必要的，下面来介绍一下配置说明：首先我们要下载ssh ：在命令行中键入“sudo apt-get install ssh”即可然后会在相应的目录下生成隐藏文件".ssh"，在.ssh文件中会有一个id_dsa文件，此文件就是私匙文件，我们要进行无密码登录就要设置公...【阅读全文】

【HADOOP】 Hadoop集群

蓝天上的青鸟 | 2013-10-27 15:27:14 | 阅读(2080) | 评论(0)

Hadoop集群安装配置【阅读全文】

【云计算】 hadoop配置参数说明

Larpenteur | 2013-10-24 11:48:10 | 阅读(660) | 评论(0)

在这里写一遍hadoop的参数说明，自己多记忆一下，如果有人需要也可以帮助一下大家Hadoop配置文件分为两类：1、只读类型的默认文件：src/core/core-default.xml src/hdfs/hdfs-default.xml src/mapred/mapred-default.xml conf/mapred-queues.xml2. 定位（site-spe...【阅读全文】

【云计算】 hadoop配置参数说明

1012191556 | 2013-10-21 21:39:24 | 阅读(3140) | 评论(0)

在这里写一遍hadoop的参数说明，自己多记忆一下，如果有人需要也可以帮助一下大家Hadoop配置文件分为两类：1、只读类型的默认文件：src/core/core-default.xml src/hdfs/hdfs-default.xml src/mapred/mapred-default.xml conf/mapred-queues.xml2. 定位（site-spe...【阅读全文】

【HADOOP】 Hadoop与Hbase分布式配置

niao5929 | 2013-10-18 09:28:31 | 阅读(710) | 评论(0)

在单机上部署好hadoop与hbase之后，现在终于要开始在集群上来部署了。一路配置下来，个人觉得其实分布式配置与单机配置差不多，但是修改了配置文件中的一些参数适应分布式。当然这只是简单地配置部署，如果真的要作为一个实际系统来使用，考虑性能稳定性等其他因素的时候当然就没有这么简单了，但是今...【阅读全文】

【HADOOP】 Hadoop与Hbase分布式配置

Larpenteur | 2013-10-17 08:59:32 | 阅读(760) | 评论(0)

在单机上部署好hadoop与hbase之后，现在终于要开始在集群上来部署了。一路配置下来，个人觉得其实分布式配置与单机配置差不多，但是修改了配置文件中的一些参数适应分布式。当然这只是简单地配置部署，如果真的要作为一个实际系统来使用，考虑性能稳定性等其他因素的时候当然就没有这么简单了，但是今...【阅读全文】

【HADOOP】 Hadoop与Hbase分布式配置

yyxl | 2013-10-17 01:58:16 | 阅读(320) | 评论(0)

在单机上部署好hadoop与hbase之后，现在终于要开始在集群上来部署了。一路配置下来，个人觉得其实分布式配置与单机配置差不多，但是修改了配置文件中的一些参数适应分布式。当然这只是简单地配置部署，如果真的要作为一个实际系统来使用，考虑性能稳定性等其他因素的时候当然就没有这么简单了，但是今...【阅读全文】

【HADOOP】应该在什么时候使用Hadoop

jieforest | 2013-10-16 10:10:56 | 阅读(2780) | 评论(0)

有人问我，“你在大数据和Hadoop方面有多少经验？”我告诉他们，我一直在使用Hadoop，但是我处理的数据集很少有大于几个TB的。他们又问我，“你能使用Hadoop做简单的分组和统计吗？”我说当然可以，我只是告诉他们我需要看一些文件格式的例子。他们递给我一个包含600MB数据的闪盘，看起来这些数据并非样本数据，由于一...【阅读全文】

【HADOOP】 Hadoop与Hbase分布式配置

windhawkgyang | 2013-10-15 15:21:42 | 阅读(8040) | 评论(0)

在单机上部署好hadoop与hbase之后，现在终于要开始在集群上来部署了。一路配置下来，个人觉得其实分布式配置与单机配置差不多，但是修改了配置文件中的一些参数适应分布式。当然这只是简单地配置部署，如果真的要作为一个实际系统来使用，考虑性能稳定性等其他因素的时候当然就没有这么简单了，但是今...【阅读全文】