Chinaunix首页 | 论坛 | 博客
  • 博客访问: 18437
  • 博文数量: 4
  • 博客积分: 128
  • 博客等级: 入伍新兵
  • 技术积分: 70
  • 用 户 组: 普通用户
  • 注册时间: 2012-11-07 19:42
文章分类

全部博文(4)

文章存档

2012年(4)

我的朋友

发布时间:2012-12-26 22:59:57

今天开始写python的学习笔记,记录在python的学习和使用中的一些知识点,望各路大侠轻拍。 一篇笔记将会记录10个比较陌生的知识点再发布,大部分参考The Python Standard Library。   1-1. StringIO提供了一种方便的方法,可以使用文件API(read write)处理内存中的文本; cStringIO版本更是用C编写以提高速度。 实例: 点击(此处)折叠或打开 from cStringIO import StringIO buffer = StingIO() print >> buffer......【阅读全文】

阅读(389) | 评论(0) | 转发(0)

发布时间:2012-12-13 23:40:54

作为分布式文件系统的另外一个阵营,glusterfs作为优秀代表,已经在一些产品中得以实施; 为了对比之前搭建的hadoop的性能和可用性,以同样三台数据服务节点一台测试机搭建了gluster fs的一个最简单的环境,进行测试。 三台服务节点和测试机均为 ubuntu server 12.04   安装: $ apt-get install glusterfs-server $ apt-get install rpcbind 编辑服务端配置文件: $ vi /etc/glusterfs/glusterd.vol #volume manageme......【阅读全文】

阅读(1619) | 评论(0) | 转发(0)

发布时间:2012-12-12 00:35:18

这两天在Ubuntu Server 12.04下搭建了两个套分布式存储环境:hadoop和glusterfs。 分别简单测试了一下性能,说是性能测试,其实离真实性能测试还有不少距离,但是基本能了解这两种架构大概能跑到多少的数据心里有底了。 首先规划节点: namenode:192.168.4.175 datanode:192.168.4.176-178 三台 测试机器:192.168.4.200 配置这5台机器的/etc/hosts,使每台设备都能相互通过IP和主机名进行解析。 ssh的配置,因为namenode需要通过ssh key认证,在运行中对从节点进行控制,所以通......【阅读全文】

阅读(2297) | 评论(0) | 转发(2)

发布时间:2012-11-29 19:28:28

......【阅读全文】

阅读(1328) | 评论(0) | 转发(0)
给主人留下些什么吧!~~
留言热议
请登录后留言。

登录 注册