Chinaunix首页 | 论坛 | 博客
  • 博客访问: 1864278
  • 博文数量: 283
  • 博客积分: 10141
  • 博客等级: 上将
  • 技术积分: 2931
  • 用 户 组: 普通用户
  • 注册时间: 2005-12-21 14:33
文章分类

全部博文(283)

文章存档

2013年(2)

2012年(2)

2011年(17)

2010年(36)

2009年(17)

2008年(18)

2007年(66)

2006年(105)

2005年(20)

分类: LINUX

2011-12-27 11:59:20

考虑如下需求:
1. 在不同服务器间传递大量小文件,比如几十G, 十几万文件;
2. 可限速,限制对服务器的其它负载;
3. 断点续传;
4. 校验;

当前的一个不完备方法:
服务器端: tar -cf - | nc -l -p
客户端:wget : --limit-rate= -qO /dev/stdout | tar -xf -

优势:
满足限速,负载均匀可控的需求;
磁盘IO较低,无须打包解包反复写入磁盘;
劣势:
不满足断点和校验需求;


阅读(3363) | 评论(0) | 转发(0) |
给主人留下些什么吧!~~