大数据成为当今主流,大公司小公司都在倾力打造自己的大数据平台,小弟不才在一家生物科技公司做网络搭建和维护,总结了一套引用于小公司的集群网络架构和存储方案。
首先介绍一下公司对计算资源的需求,由于是做生物信息相关的业务,大数据、高运算是必须的,但是对于一个初创型的小公司而言,轻则几十万的san让我们望尘莫及,高性能HPS也让我们望而却步,难道小公司就没有自己的立足之道么?NO,我们又轻量级的解决方案
1.网络架构,其实很简单就是两个子网,一个24口百兆交换机(192.168.0.0),一个24口千兆交换机(172.16.0.0),员工个人电脑连接192网络,服务器和存储连接在172网络上,其中一台服务器同时连接两个网络供跳转。
2.存储使用了两个5盘位的硬盘柜通过usb3.0连接在一台性能稍好的服务器上,硬盘柜本身支持raid0,1,5,我们使用的raid5,既保障了存储的速度和大小,还有安全的保障。此台服务器使用双网卡bonding技术,对其他计算节点提供NFS服务,网络传输速率可达1.7Gb/s,4台计算服务器同时访问速率也有50MB的速度,基本够用了
3.服务器,服务器使用的是组装的塔式服务器,小公司在不是很追求高稳定性的情况下,使用组装的塔式服务器我觉得是没有问题的,前期可以大大节省费用(当然如果公司业务做大了,我们也就不在乎这些投资了,果断投靠IBM、HP等了),为了方便服务器资源管理和充分利用,需要搭建一套集群管理系统,我们使用的torque pbs,在任务调度上还是很强的
其他的还有邮件服务器、ftp、oa系统等等可以在一台系能高一点的pc机上实现也还是没有问题的
当然搭建一套这样的计算平台还是很轻量级的,但是对于前期投入资本比较小的公司来讲省钱够用才是我们真正的生存之道
一点心得,欢迎拍砖
阅读(1793) | 评论(0) | 转发(0) |