Chinaunix首页 | 论坛 | 博客
  • 博客访问: 1851963
  • 博文数量: 524
  • 博客积分: 10
  • 博客等级: 民兵
  • 技术积分: 2483
  • 用 户 组: 普通用户
  • 注册时间: 2011-06-25 18:36
个人简介

打杂

文章分类

全部博文(524)

文章存档

2022年(3)

2021年(9)

2019年(1)

2018年(32)

2017年(11)

2016年(152)

2015年(198)

2014年(118)

分类: C/C++

2015-06-17 10:04:59

原文地址:经典漫画讲解HDFS原理 作者:raochaoxun

分布式文件系统比较出名的有HDFS 和 GFS,其中HDFS比较简单一点。本文是一篇描述非常简洁易懂的漫画形式讲解HDFS的原理。比一般PPT要通俗易懂很多。不难得的学习资料。

1、三个部分: 客户端、nameserver(可理解为主控和文件索引类似linux的inode)、datanode(存放实际数据的存server)

image

 

2、如何写数据过程

image

 

image

 

image

3、读取数据过程

image

4、容错:第一部分:故障类型及其检测方法(nodeserver 故障,和网络故障,和脏数据问题)

image

 

image

5、容错第二部分:读写容错

image

6、容错第三部分:dataNode 失效

image

7、备份规则

image

8、结束语

image

阅读(1675) | 评论(0) | 转发(0) |
给主人留下些什么吧!~~