Chinaunix首页 | 论坛 | 博客
  • 博客访问: 508762
  • 博文数量: 35
  • 博客积分: 3472
  • 博客等级: 中校
  • 技术积分: 935
  • 用 户 组: 普通用户
  • 注册时间: 2007-08-04 06:54
文章分类
文章存档

2014年(4)

2013年(2)

2011年(3)

2010年(9)

2009年(9)

2008年(8)

分类: LINUX

2014-01-22 12:30:28


这几天在看spark0.8.1的源码,不禁被scala的简洁性折服,尤其是Actor的概念,在以往的程序设计中,我一直想找到一个基于Owner+Actor+Action的模型来简化设计,没想到Actor基本实现了我的想法,而且在分布式方面更超过我的预想。一直以为Scala会成为用户使用Spark的一个障碍,现在来看即使不用Spark,程序员也应该学习一下Scala.

Spark0.8.1的Scheduler有StandAlone, Mesos和Yarn几种,这里只从最简单的StandAlone入手,由于只是根据代码形成的,没有实际运行测试,个别地方也许会有错误,欢迎指正。后续会有更新。

阅读(7989) | 评论(0) | 转发(0) |
给主人留下些什么吧!~~