Chinaunix首页 | 论坛 | 博客
  • 博客访问: 11702737
  • 博文数量: 8065
  • 博客积分: 10002
  • 博客等级: 中将
  • 技术积分: 96708
  • 用 户 组: 普通用户
  • 注册时间: 2008-04-16 17:06
文章分类

全部博文(8065)

文章存档

2008年(8065)

分类: 服务器与存储

2008-09-01 18:56:57

你是否在处理存储增长上感觉很麻烦?那么让我们来看看圣地亚哥超级计算机中心(SDSC)的IT人员是怎么做的。该中心拥有美国学术界最大的SAN之一。

在Byte and Switch的去年世界最大的SAN名单上,该中心榜上有名。该中心正在修改其庞大的28PB的存储系统,以便支持一些快速的数据增长。

由于SDSC为Teragrid--一个11个全美最大的研究站点的网络--提供大部分的核心存储,因此数据增长一直是SDSC IT团队首要的优先级问题。

"在Teragrid上出现了一些非常大型的计算系统,这些系统可以产生庞大的模拟结果",SDSC的存储管理者Bryan Banister说,"他们说一次单独的模拟就可以产生PB级的数据--在提炼结果的过程中,这些数据需要被存储一年或更长的时间"。

这位经理例举了一个南加州地震协会所做的地震研究,这是Teragrid上运行的超过100个的项目之一。

"他们最近运行了一次模拟,产生了600TB的数据",他解释道,"南加州项目和其他项目都在扩大他们的研究范围,同时为了得到更准确的结果,他们也提高了他们所产生的数据的图片分辨度"。

除了这个地震研究以外,其他的高存储项目还包括"天空调查",这个项目涉及了多个高分辨率的天文望远镜照片。

Sun/StorageTek磁带库是SDSC的SAN架构的主体,包含了高达25PB的数据。剩下的2.5PB磁盘存储由Sun Fire 15K 和12K服务器、DataDirect Networks的S2A Arrays阵列、以及一个50TB的日立的AMS系统来完成。

这位经理表示,虽然该中心此时只使用了5TB的可用磁带容量,但是磁盘存储某种程度上更有问题。"我们的磁盘系统相对来说满了",他说,"我们刚刚递交了一份申请,希望将我们的在线磁盘容量从2.5PB提高到3PB--随着Teragrid项目增长,我们将继续增长"。

新的磁盘容量将在下两个月增加,而SDSC同时还在考虑一些其他的技术来提升SAN的性能。

该中心目前在SAN内使用4GB/秒光纤通道,但是Banister考虑在未来的12个月内进行一次升级。

"如果我们需要进一步扩展我们的SAN,我们将部署8GB/秒光纤通道或FCoE(以太网光纤通道)",他说,"这主要是可以降低我们的TCO(总拥有成本)--这样可以让我们在单个网络连接后面部署更多的存储"。

SDSC存储团队同时也在评估固态磁盘(SSD)技术。目前该技术由EMC和Sun这样的公司领头,是磁带的一种快速访问替代技术。

"我们和所有的SSD解决方案的主要厂商都在商谈,比如Sun、DataDirect和其他公司",Banister说,"我认为SSD技术确实将在未来几年内爆炸式增长"。

SDSC已经在它的架构内使用了Texas Memory Systems的SSD,但是Banister倾向于继续挖掘该技术在处理高IOPS(每秒输入输出)方面的能力。数据库工作负荷和文件系统元数据往往要求高IOPS。

他说"它们的价格在快速下降,而容量在快速上升,使得它们更加实用",并补充道该中心可能将在未来的六个月中进行一次主要的SSD部署。"如果你希望对IOPS进行投资,那么它肯定是最佳的投资"。

这位经理解释道他的Sun StorEdge 6120磁带库已经准备好处理SSD的需求。"它们已经实施了一种可以处理Flash写入限制的控制器技术",他解释道,"将I/O分布在多个Flash设备上可以降低总体的工作负荷并延长SSD系统的使用寿命"。

存储虚拟化是Banister和他的团队关注的另一个领域。

"进行存储虚拟化是一件比较有意思的工作",他解释道,"特别是,来自HDS和其他厂商的解决方案将使我们可以更有效地管理我们的大型存储环境"。

SDSC正在检验HDS的USP的存储虚拟化功能。"它提供了自动精简配置等功能",他说,"我认为,如果我们需要扩展我们的SAN,它将是另一个选择"。

和管理所有这些数据增长相比,这位经理承认道保护这些数据可能是他最大的问题。

他说"这很让人胆战心惊"。他补充道除了使用RAID(独立磁盘冗余阵列)保护外,SDSC还有一个24小时的运营中心来监视所有这种信息。"和所有其他的计算机科学技术不同,存储是最难处理的,因为丢失数据是不可接受的"。

阅读(622) | 评论(0) | 转发(0) |
给主人留下些什么吧!~~