Chinaunix首页 | 论坛 | 博客

nas

  • 博客访问: 621495
  • 博文数量: 456
  • 博客积分: 10010
  • 博客等级: 上将
  • 技术积分: 6400
  • 用 户 组: 普通用户
  • 注册时间: 2008-05-08 16:08
文章分类

全部博文(456)

文章存档

2008年(456)

我的朋友

分类: 服务器与存储

2008-05-15 10:44:56

 一直以来,Petroleum Geo-Services Corp.(PGS)都没有放弃“以以太网NAS系统的价格购买到等同于FC并行文件系统性能的产品”的念头。因此,当Panasas的集群存储系统所捆绑的基于Linux的文件系统出现在它的面前时,它不禁眼前一亮。

  与大多数地质勘探公司一样,PGS也面临着“快速处理庞大数据量”的压力。该公司在休斯顿、伦敦、澳大利亚的Perth三地均设置了数据中心,它们的磁盘系统每个月输入输出的数据量高达1,500TB。据该公司的全球计算机资源部主管Andrew Wrench透露,这个数字有时候还会冲破2,000TB的大关。

  “我们的境况并不比其它同行好到哪里去,”Wrench介绍道,“如何迁移数据?如何以更快地速度迁移数据?如果以更省钱的办法来更快地迁移数据?都是地质勘探公司们普遍面临的头痛难题。”

  以“分析地震道数据”为例吧,随着系统待机时间的延长,处理成本也将成倍增长。说简单点,就是系统等待另一个节点响应(或另一台CPU完成处理任务)的时间,将直接影响到整个处理过程所需的时间。据Wrench介绍,在PGS公司引进Panasas系统之前,迁移每GB数据所需的待机时间为160秒;Panasas系统到位之后,等待过程缩短为65秒。

  Wrench还提到PGS公司有一项应用程序,大约占用了整个计算机系统50%的资源。而自从部署了总容量约为100TB的Panasas系统之后,该应用程序占用CPU的时间缩短了15%。

  “只要将这个应用程序占用CPU的时间压缩到最低值,我们就可以节省7.5%的计算机资源,”Wrench分析说,“随便换成其它任何一家公司的产品,我们可能都要花上5~10倍的价钱,才能获得与Panasas系统一样的性能。”

  在此之前,PGS公司的SAN系统数据都是通过Engenio的存储系统上自带的并行文件系统——ADIC的StorNext File System和IBM的General Parallel File System——来管理的。除此之外,在每个运行网络文件系统(NFS)的节点上还部署了NetApp FAS840s filer,专门存放大规模系统的元数据。

  “过去,我们一直在试图寻找一套更具性价比的基于Linux操作系统的并行文件系统技术,” Wrench介绍说,“我们希望这种技术能够突破网络文件系统(NFS)所面临的性能瓶颈和容量限制。”

  Panasas的集群系统上捆绑了一种被称作Active Scale File System(简称PanFS)的独家专利并行文件系统。与基于SAN的文件系统相比,PanFS最大的优点就在于,它不是按照“每节点”收取软件使用许可费的。

  “如果按照每节点(或每CPU)的标准付费的话,购买并行文件系统的费用将压得人喘不气来,”Wrench介绍说,“每份许可费的价格大约在1000美元左右。出于控制IT预算的考虑,我们以往只能拼命压制‘扩展系统’的念头。”

  当然,Wrench这次并不打算淘汰所有的旧设备,而是将那些原本构筑1级存储层的设备挪到2级存储层上,以后,随着设备使用年限的增加再逐步挪向更低级别的存储层。

  “这些设备都使用了一段时间,无可否认,它们的技术是相当成熟的,性能相对也比较稳定,” Wrench解释说,“不过,因为它们的售价太过昂贵,我们不得放弃继续升级或购买软件许可证的想法。事实上,Panasas存储系统已成为我们首选的扩展方案。”

  除了Panasas的产品之外,PGS公司还评估Cluster File System Inc.、BlueArc Corp.、TeraScale LLC等公司的文件系统。Wrench认为以上公司的产品也许并不比Panasas逊色,不过,无可否认,在这一技术领域Panasas确实是走在最前面的。

  “我们与学校不同,因为条件的限制,我们不可能同时对几个不同品牌的产品进行并行测试,也不可能仔细分析它们在技术层面上差异,”Wrench介绍说,“Panasas的存储系统最早进入我们的视野,事实证明,它的性能非常稳定,也符合我们各方面的要求。既然如此,我们何必还要挑三拣四呢?”

 

阅读(315) | 评论(0) | 转发(0) |
给主人留下些什么吧!~~