Chinaunix首页 | 论坛 | 博客
  • 博客访问: 1091183
  • 博文数量: 101
  • 博客积分: 206
  • 博客等级: 入伍新兵
  • 技术积分: 1789
  • 用 户 组: 普通用户
  • 注册时间: 2012-09-12 10:24
  • 认证徽章:
文章分类
文章存档

2018年(4)

2017年(7)

2016年(3)

2015年(14)

2014年(33)

2013年(31)

2012年(9)

发布时间:2014-06-16 21:52:42

    上一篇也简单提到了Hadoop中的MapReduce(下面都简写为MR)是一种分布式计算模型,起初由Google提出,主要用于搜索领域,解决海量数据的计算问题。MR由两个阶段组成:Map和Reduce,用户只需要实现Map()和Reduce()两个函数,即可实现分布式计算,这两个函数的形参是key、value对,表示函数的输入信息.........【阅读全文】

阅读(1459) | 评论(0) | 转发(0)

发布时间:2014-06-09 00:41:18

1、基础了解        先说说Hadoop是个什么玩意儿,一个分布式系统基础架构,由apache基金会所研发,用户可以利用集群的威力高速运算和存储数据;        Hadoop实现了一个分布式文件系统(Hadoop Distributed Flie Syste.........【阅读全文】

阅读(3907) | 评论(1) | 转发(0)

发布时间:2014-05-24 03:03:56

一、安装包管理器(如果已经安装可以忽略)1、简单的安装方法:使用Ctrl+`快捷键或者通过View->Show Console菜单打开命令行,粘贴如下代码:1import urllib.request,os; pf = 'Package Control.sublime-package'; ipp = sublime.in.........【阅读全文】

阅读(41867) | 评论(5) | 转发(1)

发布时间:2014-05-13 10:23:18

sed -i 's#//#//192.168.30.62/#' test2 修改某个字段cat dongtest | sed 's/^ \{1,\}//g'  去掉文件开头的空格:%s/false/true/g   //linux中把文件中所有的false替换成true,%s代表执行所有行替换,g标记表示替换行中所有的匹配点;如果仅仅是对当前行替换,去掉%就可以;for i in `ls -.........【阅读全文】

阅读(1276) | 评论(0) | 转发(0)

发布时间:2014-05-10 21:49:19

当管理数以十计或者更多的系统时,常常需要在多台机器上执行相同的命令。pdsh即可实现。首先必须在管理节点和每台目标机器上都安装pdsh软件包。pdsh可以在指定的一组机器上执行同一个命令。例如需要管理下列机器,机器名分别为srv1,srv2,srv3,srv4,srv5。命令格式如下:pdsh -w [SSH_OR_RSH]:USERNAME@srv[1,2-4,5] [COM.........【阅读全文】

阅读(1040) | 评论(0) | 转发(0)
给主人留下些什么吧!~~

aishiyue2014-06-17 12:05

路过 学习了

回复  |  举报

dsy8510092013-08-29 16:49

电影vs程序员:学习了,留下脚印

我新手,多多支持哦~~~~

回复  |  举报

电影vs程序员2013-08-28 17:21

学习了,留下脚印

回复  |  举报
留言热议
请登录后留言。

登录 注册