发布时间:2014-11-04 19:59:01
昨天晚上EMR 节点挂掉3台,今天中午又LOST了6台, 本来就二三十台的小集群,LOST了三分之一的机器处理方法:1 EMR namenode 和datanode节点 之间没有做免登陆的配置 ssh的时候必须带私钥 如: ssh -i ~/XXX.pem username@ip 登陆到dat.........【阅读全文】
发布时间:2014-08-19 21:54:14
一 signale(SIGPIPE,SIG_IGN) 函数的含义 当服务器close一个连接是, 如client端接着发数据,根据tcp协议的规定, 会收到一个RST相应,client再往这个服务器发送数据时, 系统会发出一个SIGPIPE信号给进程,告诉进程这个连接以及断开了, 不要再写了.........【阅读全文】
发布时间:2014-03-21 21:08:45
刚刚开始全部使用亚马逊的boto sdk 的api去使用s3后来发现awscli 非常的好用现在经常使用的cp命令进行下总结总结1 单个文件的cp aws s3 cp s3://bucket/path/ .2 多个文件的down aws s3 cp s3://bucket/path/.........【阅读全文】
发布时间:2014-03-21 21:00:53
1 如果安装pip, 则很简单 直接一句话就可以了 pip install awscli --user2 如果没有安装pip就比较悲剧了, 我就是属于比较悲剧的。 下面是安装pip的过程2.1 安装ez_setup.py &n.........【阅读全文】