Chinaunix首页 | 论坛 | 博客
  • 博客访问: 688898
  • 博文数量: 94
  • 博客积分: 3369
  • 博客等级: 中校
  • 技术积分: 1144
  • 用 户 组: 普通用户
  • 注册时间: 2009-01-09 11:25
文章分类

全部博文(94)

文章存档

2014年(1)

2013年(1)

2012年(65)

2011年(20)

2009年(7)

我的朋友

分类:

2012-09-06 18:50:20

原文地址:经典漫画讲解HDFS原理 作者:raochaoxun

分布式文件系统比较出名的有HDFS 和 GFS,其中HDFS比较简单一点。本文是一篇描述非常简洁易懂的漫画形式讲解HDFS的原理。比一般PPT要通俗易懂很多。不难得的学习资料。

1、三个部分: 客户端、nameserver(可理解为主控和文件索引类似linux的inode)、datanode(存放实际数据的存server)

image

 

2、如何写数据过程

image

 

image

 

image

3、读取数据过程

image

4、容错:第一部分:故障类型及其检测方法(nodeserver 故障,和网络故障,和脏数据问题)

image

 

image

5、容错第二部分:读写容错

image

6、容错第三部分:dataNode 失效

image

7、备份规则

image

8、结束语

image

阅读(934) | 评论(0) | 转发(0) |
给主人留下些什么吧!~~