Chinaunix首页 | 论坛 | 博客
  • 博客访问: 519323
  • 博文数量: 10
  • 博客积分: 8010
  • 博客等级: 中将
  • 技术积分: 991
  • 用 户 组: 普通用户
  • 注册时间: 2006-06-27 10:14
文章分类
文章存档

2011年(1)

2008年(9)

我的朋友

分类: 系统运维

2008-08-05 11:53:52


   
以前整理过的关于larbin的队列结构给需要的网友:

    
为什么disk和priority的队列都是成对出现的,是因为可以认为每个site在namedSiteList当中都有一个小的队列来保存它的url,这个url的个数是有个限制的,当超过这个限制的时候就不能再把该site下的url放入,但也不能丢弃,而是放入wait队列。larbin会控制一段时间在disk队列中取url,一段时间在diskWait当中取url。disk和priority的区别只是优先级的区别。
namedSiteLIst的作用可以任务是实现了DNS缓存;IPSiteList是控制了polite访问。
阅读(2515) | 评论(2) | 转发(0) |
给主人留下些什么吧!~~

bigpretty2009-12-16 09:44:30

你好,我现在也想学laibin,想研究下搜索引擎,但是我之前是学java的,对c有点了解,对linux的使用也了解,但是对c++的开发和linux开发不是很了解,想向您请教,谢谢,如果可以的话可以加我QQ:51620740,谢谢了

chinaunix网友2008-08-05 13:16:43

太感谢了!