Chinaunix首页 | 论坛 | 博客
  • 博客访问: 14365
  • 博文数量: 4
  • 博客积分: 0
  • 博客等级: 民兵
  • 技术积分: 26
  • 用 户 组: 普通用户
  • 注册时间: 2013-12-10 10:46
文章分类
文章存档

2013年(4)

我的朋友
最近访客

分类: C/C++

2013-12-27 14:57:15

原文地址:经典漫画讲解HDFS原理 作者:raochaoxun

分布式文件系统比较出名的有HDFS 和 GFS,其中HDFS比较简单一点。本文是一篇描述非常简洁易懂的漫画形式讲解HDFS的原理。比一般PPT要通俗易懂很多。不难得的学习资料。

1、三个部分: 客户端、nameserver(可理解为主控和文件索引类似linux的inode)、datanode(存放实际数据的存server)

image

 

2、如何写数据过程

image

 

image

 

image

3、读取数据过程

image

4、容错:第一部分:故障类型及其检测方法(nodeserver 故障,和网络故障,和脏数据问题)

image

 

image

5、容错第二部分:读写容错

image

6、容错第三部分:dataNode 失效

image

7、备份规则

image

8、结束语

image

阅读(1035) | 评论(0) | 转发(0) |
0

上一篇:Awk学习笔记

下一篇:没有了

给主人留下些什么吧!~~