搜索博文结果_ChinaUnix博客

coolcole | 2013-10-03 20:55:04 | 阅读(1030) | 评论(0)

From：http://www.programmer.com.cn/10416/ 2011年，对Hadoop来说注定是载入史册的一年：Yahoo!与风险投资公司Benchmark Capital联合建立独立公司Hortonworks，接手Yahoo!开源软件平台Apache Hadoop；Hadoop海量数据分析平台Datameer、Karmasphere和Hadapt分别获得千万美元级别投资；一向对开源趋势不屑一顾的微软转投Hadoop怀抱；Hadoop之父Doug Cutting第一次莅临中国，布道Hadoop 0.23…… 可以说，Hadoop生态系统呈【阅读全文】

【HADOOP】 Hadoop集群完全分布式模式环境部署

鸟哥のlinux | 2013-09-13 17:24:14 | 阅读(58694) | 评论(3)

Hadoop简介 Hadoop是Apache软件基金会旗下的一个开源分布式计算平台。以Hadoop分布式文件系统（HDFS，Hadoop Distributed Filesystem）和MapReduce（Google MapReduce的开源实现）为核心的Hadoop为用户提供了系统底层细节透明的分布式基础架构。对于Hadoop的集群来讲，...【阅读全文】

【HADOOP】 HDFS 分布式文件系统

houselong | 2013-08-08 10:04:43 | 阅读(360) | 评论(0)

HDFS 分布式文件系统【阅读全文】

【HADOOP】 hadoop学习

houselong | 2013-08-08 10:01:21 | 阅读(480) | 评论(0)

Hadoop 是Google MapReduce的一个Java实现。MapReduce是一种简化的分布式编程模式，让程序自动分布到一个由普通机器组成的超大集群上并发执行。就如同java程序员可以不考虑内存泄露一样， MapReduce的run-time系统会解决输入数据的分布细节，跨越机器集群的程序执行调度，处理机器的失效，并且管理机器之...【阅读全文】

【HADOOP】 Hadoop安装手册4-添加与删除Hadoop节点

houselong | 2013-08-08 09:39:00 | 阅读(480) | 评论(0)

3、HDFS添加节点现有环境如下：192.168.30.203 hdnode1192.168.30.204 hdnode2192.168.30.205 hdnode3其中hdnode1是namenode，hdnode2和hdnode3是datanode我们要新增加两个datanode：192.168.30.206 hdnode4192.168.30.207 hdnode5那...【阅读全文】

【HADOOP】 HDFS功能测试

houselong | 2013-08-08 09:38:49 | 阅读(670) | 评论(0)

前面我们已经配置了一套HADOOP环境，环境虽然有了，但不少朋友恐怕心头依旧茫然，不知道接下来该做什么，不要着急，这主要是因为我们(我字重读)对HADOOP的认知还停留在概念的层面，所知有限自然不明白该如何着手。其实HADOOP没有那么深奥，老话形容说就是层窗户纸，看着朦朦胧胧如雾里看花不知所以，其实一点儿就透。下面...【阅读全文】

【HADOOP】 MapReduce功能测试

houselong | 2013-08-08 09:38:37 | 阅读(600) | 评论(0)

2、MapReduce功能测试MapReduce原理大致明白了，可现在仍不知从何处入手咋整呐，还好还好，hadoop自带了几个jar包可用于测试：[grid@hdnode1 hadoop-0.20.2]$ ll *.jar-rw-rw-r-- 1 grid grid 6839 Feb 19 2010&nbs...【阅读全文】

【HADOOP】 HDFS 分布式文件系统

blue_1110 | 2013-08-06 20:30:28 | 阅读(4180) | 评论(0)

HDFS 分布式文件系统【阅读全文】

【HADOOP】 hadoop平台下用mapreduce实现单源最短路径算法（两种实现）

圣剑蓝骑士 | 2013-07-31 12:06:02 | 阅读(2330) | 评论(0)

以下为实现时用到的包及其职责 com.ouyang.chk包含检测迭代能否停止的mapreduce任务的一些类com.ouyang.driver程序的入口com.ouyang.graph图的...【阅读全文】

【HADOOP】 Hadoop I/O系统介绍

圣剑蓝骑士 | 2013-07-31 11:32:58 | 阅读(850) | 评论(0)

看过很多Hadoop介绍或者是学习的帖子和文章，发现介绍Hadoop I/O系统的很少。很多文章都会介绍HDFS的架构和使用，还有MapReduce编程等等。尤其是在介绍Hadoop的MapReduce编程之前，首先必须了解下Hadoop的I/O知识，要不一看到IntWritable、LongWritable、Text、NullWritable等概念就有点犯晕，看到和普通的Java程序类似的...【阅读全文】

【HADOOP】免费给大学生做暑期保姆培训

sxjfu03 | 2013-07-24 16:18:42 | 阅读(190) | 评论(0)

媒体报道：福州免费培训大学生做“暑期保姆” 首批近半是男生男生做保姆，一听到这一信息，多多少少让我们心头一震，好像自古以来，保姆月嫂之类的工作都是由女人承担，鲜少是男人负责，不管男人女人，锻炼自己当保姆，一方面是份魄力，另一方面则是一种成长，未来也需要我们学会照顾关心别人。7月中旬，...【阅读全文】

【HADOOP】免费给大学生做暑期保姆培训

sxjfu02 | 2013-07-24 16:17:56 | 阅读(150) | 评论(0)

媒体报道：福州免费培训大学生做“暑期保姆” 首批近半是男生男生做保姆，一听到这一信息，多多少少让我们心头一震，好像自古以来，保姆月嫂之类的工作都是由女人承担，鲜少是男人负责，不管男人女人，锻炼自己当保姆，一方面是份魄力，另一方面则是一种成长，未来也需要我们学会照顾关心别人。7月中旬，...【阅读全文】

【HADOOP】特别培训计划正式启动

sxjfu02 | 2013-07-22 17:29:30 | 阅读(360) | 评论(0)

内蒙古鄂温克旗启动家庭服务从业人员“特别培训计划”当前各地各市的家庭服务培训层出不穷，让我们有如沐春风之感，深切的感受到各地政府对于发展家庭服务业的信心。7月15日，随着伊敏河镇家政月嫂培训班的开班，鄂温克旗家庭服务业从业人员“特别培训计划”正式启动。　　为全面推进家庭服务业从业人...【阅读全文】

【HADOOP】中联办主任：“占领中环”会害了香港年轻人

cie938sds | 2013-07-17 10:10:04 | 阅读(120) | 评论(0)

中联办主任张晓明　　中新社香港7月16日电 (记者赵建华)中央人民政府驻香港特别行政区联络办公室(中联办)主任张晓明16日说，坚决反对“占领中环”行动。　　作出上述之前，这位中联办负责人刚刚出席了香港立法会午宴。这也是香港特区成立16年来，中联办负责人和立法会各派别议员的第一次聚会。　　宴会结束后...【阅读全文】

【HADOOP】 Hadoop入门：单节点模式安装

Larpenteur | 2013-07-09 05:54:22 | 阅读(580) | 评论(0)

Hadoop是Intel公司推出的一款分布式系统框架，可以用于多个系统的协同工作，主要原理使用了MapReduce框架，先将原始数据map到不同的部分，在分布式系统中处理完成后再重新reduce成为一个整体。Hadoop在云计算中可以发挥独特的作用，今天先从安装单机节点模式开始对Hadoop有个感性的认识。首先...【阅读全文】

【HADOOP】 Hadoop入门：单节点模式安装

visitorone | 2013-07-08 22:30:39 | 阅读(690) | 评论(0)

Hadoop是Intel公司推出的一款分布式系统框架，可以用于多个系统的协同工作，主要原理使用了MapReduce框架，先将原始数据map到不同的部分，在分布式系统中处理完成后再重新reduce成为一个整体。Hadoop在云计算中可以发挥独特的作用，今天先从安装单机节点模式开始对Hadoop有个感性的认识。首先...【阅读全文】

【HADOOP】 MapReduce功能测试

幸运啤酒盖 | 2013-07-08 19:26:50 | 阅读(2420) | 评论(0)

2、MapReduce功能测试MapReduce原理大致明白了，可现在仍不知从何处入手咋整呐，还好还好，hadoop自带了几个jar包可用于测试：[grid@hdnode1 hadoop-0.20.2]$ ll *.jar-rw-rw-r-- 1 grid grid 6839 Feb 19 2010&nbs...【阅读全文】

【HADOOP】 HDFS功能测试

幸运啤酒盖 | 2013-07-08 19:26:39 | 阅读(2300) | 评论(0)

前面我们已经配置了一套HADOOP环境，环境虽然有了，但不少朋友恐怕心头依旧茫然，不知道接下来该做什么，不要着急，这主要是因为我们(我字重读)对HADOOP的认知还停留在概念的层面，所知有限自然不明白该如何着手。其实HADOOP没有那么深奥，老话形容说就是层窗户纸，看着朦朦胧胧如雾里看花不知所以，其实一点儿就透。下面...【阅读全文】

【HADOOP】 Hadoop安装手册4-添加与删除Hadoop节点

幸运啤酒盖 | 2013-07-08 19:26:01 | 阅读(2070) | 评论(0)

3、HDFS添加节点现有环境如下：192.168.30.203 hdnode1192.168.30.204 hdnode2192.168.30.205 hdnode3其中hdnode1是namenode，hdnode2和hdnode3是datanode我们要新增加两个datanode：192.168.30.206 hdnode4192.168.30.207 hdnode5那...【阅读全文】

【HADOOP】 Hadoop入门：单节点模式安装

windhawkgyang | 2013-07-07 08:38:30 | 阅读(7660) | 评论(2)

Hadoop是Intel公司推出的一款分布式系统框架，可以用于多个系统的协同工作，主要原理使用了MapReduce框架，先将原始数据map到不同的部分，在分布式系统中处理完成后再重新reduce成为一个整体。Hadoop在云计算中可以发挥独特的作用，今天先从安装单机节点模式开始对Hadoop有个感性的认识。首先...【阅读全文】