Chinaunix首页 | 论坛 | 博客
  • 博客访问: 6318634
  • 博文数量: 2759
  • 博客积分: 1021
  • 博客等级: 中士
  • 技术积分: 4091
  • 用 户 组: 普通用户
  • 注册时间: 2012-03-11 14:14
文章分类

全部博文(2759)

文章存档

2019年(1)

2017年(84)

2016年(196)

2015年(204)

2014年(636)

2013年(1176)

2012年(463)

发布时间:2014-09-11 11:56:11

TFS集群支持异地机房容灾,一个逻辑集群包含分布在多个机房的物理集群,其中一个是主集群,其他的是备份集群。客户端写文件时,都会写到主集群,主集群的Dataserver(DS)异步将数据同步到多个备集群;客户端在读取数据时,会选择离自己最近的物理集群读取数据,如果读不到数据,就重试逻辑集群里的其他物理集群。.........【阅读全文】

阅读(784) | 评论(0) | 转发(0)

发布时间:2014-09-11 11:24:30

一、原理        Hadoop Streaming是Hadoop提供的一个编程工具,它允许用户使用任何可执行文件或者脚本文件作为Mapper和Reducer,例如:采用shell脚本语言中的一些命令作为mapper和reducer(cat作为mapper,wc作为reducer)        $HADOOP_HOME/.........【阅读全文】

阅读(983) | 评论(0) | 转发(0)

发布时间:2014-08-01 22:48:30

YARN、资源配置、container......【阅读全文】

阅读(985) | 评论(0) | 转发(0)

发布时间:2014-07-19 09:25:06

Spark On Yarn 环境搭建......【阅读全文】

阅读(815) | 评论(1) | 转发(0)

发布时间:2014-07-01 03:25:35

MapReduce、WordCount、shell脚本......【阅读全文】

阅读(835) | 评论(0) | 转发(0)
给主人留下些什么吧!~~
留言热议
请登录后留言。

登录 注册