发布时间：2012-12-26 22:59:57

今天开始写python的学习笔记，记录在python的学习和使用中的一些知识点，望各路大侠轻拍。 一篇笔记将会记录10个比较陌生的知识点再发布，大部分参考The Python Standard Library。   1-1. StringIO提供了一种方便的方法，可以使用文件API(read write)处理内存中的文本； cStringIO版本更是用C编写以提高速度。 实例： 点击(此处)折叠或打开 from cStringIO import StringIO buffer = StingIO() print >> buffer......【阅读全文】

发布时间：2012-12-13 23:40:54

作为分布式文件系统的另外一个阵营，glusterfs作为优秀代表，已经在一些产品中得以实施； 为了对比之前搭建的hadoop的性能和可用性，以同样三台数据服务节点一台测试机搭建了gluster fs的一个最简单的环境，进行测试。 三台服务节点和测试机均为 ubuntu server 12.04   安装: $ apt-get install glusterfs-server $ apt-get install rpcbind 编辑服务端配置文件： $ vi /etc/glusterfs/glusterd.vol #volume manageme......【阅读全文】

发布时间：2012-12-12 00:35:18

这两天在Ubuntu Server 12.04下搭建了两个套分布式存储环境：hadoop和glusterfs。 分别简单测试了一下性能，说是性能测试，其实离真实性能测试还有不少距离，但是基本能了解这两种架构大概能跑到多少的数据心里有底了。 首先规划节点： namenode：192.168.4.175 datanode：192.168.4.176-178 三台 测试机器：192.168.4.200 配置这5台机器的/etc/hosts，使每台设备都能相互通过IP和主机名进行解析。 ssh的配置，因为namenode需要通过ssh key认证，在运行中对从节点进行控制，所以通......【阅读全文】

发布时间：2012-11-29 19:28:28

......【阅读全文】