分布式文件系统FastDFS设计原理_zyd

YunNotesydzhang.blog.chinaunix.net

首页　| 　博文目录　| 　关于我

zyd_cu

博客访问： 4078265
博文数量： 251
博客积分： 11197
博客等级：上将
技术积分： 6862
用户组：普通用户
注册时间： 2008-12-05 14:41

个人简介

@HUST张友东 work@taobao zyd_com@126.com

文章分类

全部博文（251）

互联网（8）
课程笔记（7）
技术交流（5）
KV存储（8）
搜索引擎（5）
系统管理（14）
网络编程（22）
程序设计（14）
文件系统（15）
C/C++（18）
Linux内核（29）
Linux编程（27）
FUSE专辑（10）
分布式系统（19）
工作杂记（17）
TFS开发（33）
未分配的博文（0）

文章存档

2014年（10）

2013年（20）

2012年（22）

2011年（74）

2010年（98）

2009年（27）

我的朋友

最近访客

推荐博文

分布式文件系统FastDFS设计原理

发布时间：2013-12-30 12:50:47

FastDFS是一个开源的轻量级分布式文件系统，由跟踪服务器（tracker server）、存储服务器（storage server）和客户端（client）三个部分组成，主要解决了海量数据存储问题，特别适合以中小文件（建议范围：4KB < file_size ......【阅读全文】

阅读(52847) | 评论(0) | 转发(15)

小文件合并存储问题

发布时间：2013-12-23 15:14:12

LOSF(lots of small files）问题是很多互联网企业都会遇到的, 文本、图片、音乐是典型的小文件应用场景，比如58同城、淘宝网、虾米网、汽车之家等网站都是有海量小文件存储需求的。小文件存储问题集中表现在如下几个方面：1. 小文件太多，单机无法存储 2. 小文件的存取性能 3. 小文件的高效备份与恢复对于问题1.........【阅读全文】

阅读(16332) | 评论(4) | 转发(2)

undo log与redo log原理分析

发布时间：2013-07-22 08:56:27

数据库通常借助日志来实现事务，常见的有undo log、redo log，undo/redo log都能保证事务特性，这里主要是原子性和持久性，即事务相关的操作，要么全做，要么不做，并且修改的数据能得到持久化。假设数据库在操作时，按如下约定记录日志：1. 事务开始时，记录START T2. 事务修改时，记录（T，x，v），说明事务T操.........【阅读全文】

阅读(19771) | 评论(0) | 转发(1)

分布式工程经验

发布时间：2013-06-17 09:10:31

的N个server上，产生N个副本，要求保证N个副本不在同一个机架上，首先从server列表里选出N个机架安全的server是可能失败的，成功选取N个server后，写数据请求发到N个server都是有可能失败的，请求发送成功后，N个server的处理请求也是有可能失败的，比如申请不到存储资源等，或是server宕机，这时对请求不会有任何反馈，.........【阅读全文】

阅读(3631) | 评论(1) | 转发(0)

分布式系统测试

发布时间：2013-04-01 11:31:15

近半年在做分布式系统开发的同时，也做了不少的测试工作，软件工程教科书上描述软件项目的流程，基本上都会提到单元测试、集成测试、压力测试等名词，但对这些词汇一直停留在理论认识阶段。研究生阶段做的项目，因为要求不高，基本上也没做什么测试工作；去年在实习的时候，因为时间有限，主要接触单元测试和系统功能测试.........【阅读全文】

阅读(7541) | 评论(3) | 转发(1)