搜索博文结果_ChinaUnix博客

博客首页博客专家往日推荐博客文集

热搜： Windows 服务器 C# 嵌入式 Oracle 云计算负载均衡移动开发

博客首页〉搜索结果

按类别查询搜索结果

操作系统程序设计数据库热点技术综合架构与运维移动开发与应用 Web前端

虚拟化| 云计算| 大数据| HADOOP| 高性能计算|

关于关键词的检测结果，共 38 条

【HADOOP】自定义OutputFormat系列之一

double_lq | 2014-07-12 16:33:42 | 阅读(0) | 评论(0)

在看了WordCount实例和TextOutputFormat的源码后，决定自定义一个OutputFormat，主要实现的功能就是将WordCount的最后输出结果中的Tab空格键转换为^^^^。具体代码如下：//自定义outputFormatpackage yuu;import java.io.DataOutputStream;import java.io.I...【阅读全文】

【HADOOP】看两种截然不同的设计理念：分布式文件系统支持大和小文件的思考

Aquester | 2014-04-19 11:33:41 | 阅读(3130) | 评论(0)

为何Google GFS设计成对大文件友好，而像腾讯的TFS（Tencent File System）和淘宝的TFS（Taobao File System）却设计成对小文件友好了？这一点非常好理解，两个TFS都用来满足图片等大量小文件的需求。但是两者是矛盾的吗？答案是否。实际中TFS也在努力支持大文件，GFS也要支持小文件。...【阅读全文】

【HADOOP】查看HDFS集群信息

Aquester | 2014-04-19 10:42:14 | 阅读(3550) | 评论(0)

clusterID：集群ID，必须保持一致1）在NameNode上查看cat $HADOOP_HOME/dfs/name/current/VERSION#Fri Apr 18 11:56:57 GMT 2014namespaceID=1397306199clusterID=CID-bfe869e9-fe7a-48c7-9606-08512f1708becTime=0storageType=NAME_NODEblockpoolID=BP-139798373-172.25.40.171-1397735615751layoutVersion=-56...【阅读全文】

【HADOOP】 Hadoop分布式文件系统（HDFS）

lingshaohusoft | 2014-03-19 14:27:27 | 阅读(2280) | 评论(0)

Hadoop是一个基于JAVA的支持数据密集型分布式应用的分布式文件系统。它能够保证应用可以在上千个低成本商用硬件存储结点上处理PB级的数据。Hadoop是Apache开源项目，Yahoo支持这个项目并在自己的web搜索和商业广告业务上使用它。Hadoop开发类似于Google的MapReduce和Google文件系统的技术。图 5.9为Hadoop的整体结构。...【阅读全文】

【HADOOP】 Hadoop分布式文件系统和OpenStack对象存储有何不同？

zzjlzx | 2014-02-18 17:19:31 | 阅读(910) | 评论(0)

Hadoop分布式文件系统和OpenStack对象存储有何不同？“HDFS (Hadoop分布式文件系统)和OpenStack对象存储(OpenStack Object Storage)似乎都有着相似的目的：实现冗余、快速、联网的存储。什么样的技术特性让这两种系统因而不一样?这两种存储系统最终趋于融合是否大有意义?”...【阅读全文】

【HADOOP】 hadoop系统的端口

LaoLiulaoliu | 2014-01-05 23:13:10 | 阅读(1130) | 评论(0)

周海汉 /文2012.9.13本文地址：http://abloz.com/2012/09/13/the-hadoop-system-of-port.htmlhadoop系统部署时用到不少端口。有的是Web UI所使用的，有的是内部通信所使用的，有的是监控所使用的。实际系统中可能用于防火墙的端口设计。一些内部通信用的端口可能也需要外部能访问。如两个集群的数据对拷。1....【阅读全文】

【HADOOP】查看HADOOP中一个文件有多少块组成及所在机器ip

zzjlzx | 2013-11-29 14:50:29 | 阅读(4540) | 评论(0)

看文件信息hadoop fsck /user/filename更详细的。 -racks 是显示机架位置hadoop fsck /user/filename -files -blocks -locations -racks -files 文件分块信息，-blocks 在带-files参数后才显示block信息-locations 在带-blocks参数后才显示block块所在datanode的具...【阅读全文】

【HADOOP】 Hadoop初探之HDFS系统架构

Larpenteur | 2013-11-18 11:40:49 | 阅读(820) | 评论(0)

一、适应场景 HDFS是Hadoop的分布式文件系统，即Hadoop Distributed Filesystem。 HDFS以流式数据访问模式来存储超大文件，运行于商用硬件集群上。这句话信息量太大，分解开来就是HDFS适合如下场景： ...【阅读全文】

【HADOOP】 Hadoop初探之HDFS系统架构

niao5929 | 2013-11-17 20:59:28 | 阅读(480) | 评论(1)

【HADOOP】 Hadoop初探之HDFS系统架构

scq2099yt | 2013-11-16 13:49:28 | 阅读(4970) | 评论(1)

【HADOOP】 Hadoop如何实现关联计算

jiongtoast | 2013-11-05 08:39:29 | 阅读(780) | 评论(0)

hadoop如何实现关联计算。【阅读全文】

【HADOOP】 HDFS 分布式文件系统

houselong | 2013-08-08 10:04:43 | 阅读(370) | 评论(0)

HDFS 分布式文件系统【阅读全文】

【HADOOP】 HDFS 分布式文件系统

blue_1110 | 2013-08-06 20:30:28 | 阅读(4200) | 评论(0)

HDFS 分布式文件系统【阅读全文】

【HADOOP】 Hadoop I/O系统介绍

圣剑蓝骑士 | 2013-07-31 11:32:58 | 阅读(850) | 评论(0)

看过很多Hadoop介绍或者是学习的帖子和文章，发现介绍Hadoop I/O系统的很少。很多文章都会介绍HDFS的架构和使用，还有MapReduce编程等等。尤其是在介绍Hadoop的MapReduce编程之前，首先必须了解下Hadoop的I/O知识，要不一看到IntWritable、LongWritable、Text、NullWritable等概念就有点犯晕，看到和普通的Java程序类似的...【阅读全文】

【HADOOP】中联办主任：“占领中环”会害了香港年轻人

cie938sds | 2013-07-17 10:10:04 | 阅读(120) | 评论(0)

中联办主任张晓明　　中新社香港7月16日电 (记者赵建华)中央人民政府驻香港特别行政区联络办公室(中联办)主任张晓明16日说，坚决反对“占领中环”行动。　　作出上述之前，这位中联办负责人刚刚出席了香港立法会午宴。这也是香港特区成立16年来，中联办负责人和立法会各派别议员的第一次聚会。　　宴会结束后...【阅读全文】

【HADOOP】华科高能国际科技发展(北京)有限公司工程

yxticba1 | 2013-05-14 18:06:06 | 阅读(600) | 评论(0)

PM2,华科高能国际科技发展(北京)有限公司家电业也玩大数据万家乐智能监控系统确保环保节能.5映射当今中国环境改革近在咫尺信任在过去多少个月里，中国的庶民对PM2.5这个词印象深入了吧。它的本意是大气中粒径小于或即是2&mu,华科高能国际科技发展(北京)有限公司;m（有时用小于2.5&mu,华科高能国际科技发展(北京)有限公司...【阅读全文】

【HADOOP】华科高能国际科技发展(北京)有限公司环保

yxticba1 | 2013-05-14 18:05:18 | 阅读(640) | 评论(0)

在从前的日子里，全国多个城市曾屡次深陷十面“霾”伏，雾霾气象激发了人们对环境维护的关注，也使得咱们每个人都更憧憬着绿色低碳的生活。就北京来说，春节期间爆竹烟花燃放量大大下降，也从一个侧面体现出从本身做起，已成为宽大市民自发被迫的举动。据中国迷信院颁布的最新研讨成果显示，雾霾中的传染物有相...【阅读全文】

【HADOOP】雪舞流月天涯博客有见识的人都在此天涯社区

shishangxiu | 2013-03-29 12:46:14 | 阅读(160) | 评论(0)

越来越多的人在厨房器具的选择上喜欢选择整体厨房了，其抽油烟机的外形与整体厨房的和谐设计让人们眼前一亮。的确，平板式的机体设计，简洁时尚。虽然价格不菲,女士风衣，仍颇受市场欢迎。然而，它并不适合中国菜煎、炒、烹、炸的烹饪形式,长款呢大衣，因为集烟罩太浅或根本就没有集烟罩，导致来不及抽走的油烟外溢扩散严重...【阅读全文】

网络110 报警服务