Chinaunix首页 | 论坛 | 博客
  • 博客访问: 638098
  • 博文数量: 43
  • 博客积分: 1108
  • 博客等级: 少尉
  • 技术积分: 1852
  • 用 户 组: 普通用户
  • 注册时间: 2012-03-18 16:33
文章分类

全部博文(43)

文章存档

2012年(43)

分类: 系统运维

2012-03-19 10:03:20

设计要素

nutch包含以下几个部分:

  1. 辅助类

    Log:记载运行信息;

    Time:记载时间信息;

  1. 协议类

    目的:各种进程之间的通信协议

    1. ClientM/R系统通信协议:完成客户端和M/R系统的通信;
    2. JobTask系统通信协议:由于一个任务要分布完成,所以需要任务和子任务之间的通信协议;
    3. MapTaskReduceTask通信协议:由于MAPREDUCE是一个任务的顺序执行过程,所以需要两者之间的通信协议来对两个步骤进行协调,主要是文件输入输出协调;
    4. 进程通信协议:子进程和父进程通信协议;
 

/*版权声明:可以任意转载,转载时请务必标明文章原始出处和作者信息 .*/

张俊林
timestamp:2006年11月26日

阅读(6359) | 评论(0) | 转发(0) |
给主人留下些什么吧!~~