Chinaunix首页 | 论坛 | 博客
  • 博客访问: 635245
  • 博文数量: 356
  • 博客积分: 0
  • 博客等级: 民兵
  • 技术积分: 2287
  • 用 户 组: 普通用户
  • 注册时间: 2013-04-08 17:08
文章分类

全部博文(356)

文章存档

2023年(3)

2022年(7)

2021年(33)

2020年(47)

2019年(36)

2018年(221)

2017年(1)

2015年(1)

2013年(7)

我的朋友

分类: C/C++

2018-12-06 15:22:15

原文地址:经典漫画讲解HDFS原理 作者:raochaoxun

分布式文件系统比较出名的有HDFS 和 GFS,其中HDFS比较简单一点。本文是一篇描述非常简洁易懂的漫画形式讲解HDFS的原理。比一般PPT要通俗易懂很多。不难得的学习资料。

1、三个部分: 客户端、nameserver(可理解为主控和文件索引类似linux的inode)、datanode(存放实际数据的存server)

image

 

2、如何写数据过程

image

 

image

 

image

3、读取数据过程

image

4、容错:第一部分:故障类型及其检测方法(nodeserver 故障,和网络故障,和脏数据问题)

image

 

image

5、容错第二部分:读写容错

image

6、容错第三部分:dataNode 失效

image

7、备份规则

image

8、结束语

image

阅读(1814) | 评论(0) | 转发(0) |
给主人留下些什么吧!~~