WatchStor.com — 领先的中文存储网络媒体 | 51CTO旗下网站

新闻资讯 > 16Gb > 正文

以NAS价位获取FC文件系统性能

IT专家存储子站  佚名丨2006-02-07 17:31 标签:16Gb 光纤通道 

一直以来,Petroleum Geo-Services Corp.(PGS)都没有放弃“以以太网NAS系统的价格购买到等同于FC并行文件系统性能的产品”的念头。因此,当Panasas的集群存储系统所捆绑的基于Linux的文件系统出现在它的面前时,它不禁眼前一亮。

与大多数地质勘探公司一样,PGS也面临着“快速处理庞大数据量”的压力。该公司在休斯顿、伦敦、澳大利亚的Perth三地均设置了数据中心,它们的磁盘系统每个月输入输出的数据量高达1,500TB。据该公司的全球计算机资源部主管Andrew Wrench透露,这个数字有时候还会冲破2,000TB的大关。

“我们的境况并不比其它同行好到哪里去,”Wrench介绍道,“如何迁移数据?如何以更快地速度迁移数据?如果以更省钱的办法来更快地迁移数据?都是地质勘探公司们普遍面临的头痛难题。”

以“分析地震道数据”为例吧,随着系统待机时间的延长,处理成本也将成倍增长。说简单点,就是系统等待另一个节点响应(或另一台CPU完成处理任务)的时间,将直接影响到整个处理过程所需的时间。据Wrench介绍,在PGS公司引进Panasas系统之前,迁移每GB数据所需的待机时间为160秒;Panasas系统到位之后,等待过程缩短为65秒。

Wrench还提到PGS公司有一项应用程序,大约占用了整个计算机系统50%的资源。而自从部署了总容量约为100TB的Panasas系统之后,该应用程序占用CPU的时间缩短了15%。

“只要将这个应用程序占用CPU的时间压缩到最低值,我们就可以节省7.5%的计算机资源,”Wrench分析说,“随便换成其它任何一家公司的产品,我们可能都要花上5~10倍的价钱,才能获得与Panasas系统一样的性能。”

在此之前,PGS公司的SAN系统数据都是通过Engenio的存储系统上自带的并行文件系统——ADIC的StorNext File System和IBM的General Parallel File System——来管理的。除此之外,在每个运行网络文件系统(NFS)的节点上还部署了NetApp FAS840s filer,专门存放大规模系统的元数据。

“过去,我们一直在试图寻找一套更具性价比的基于Linux操作系统的并行文件系统技术,” Wrench介绍说,“我们希望这种技术能够突破网络文件系统(NFS)所面临的性能瓶颈和容量限制。”

Panasas的集群系统上捆绑了一种被称作Active Scale File System(简称PanFS)的独家专利并行文件系统。与基于SAN的文件系统相比,PanFS最大的优点就在于,它不是按照“每节点”收取软件使用许可费的。

“如果按照每节点(或每CPU)的标准付费的话,购买并行文件系统的费用将压得人喘不气来,”Wrench介绍说,“每份许可费的价格大约在1000美元左右。出于控制IT预算的考虑,我们以往只能拼命压制‘扩展系统’的念头。”

当然,Wrench这次并不打算淘汰所有的旧设备,而是将那些原本构筑1级存储层的设备挪到2级存储层上,以后,随着设备使用年限的增加再逐步挪向更低级别的存储层。

在此之前,PGS公司的SAN系统数据都是通过Engenio的存储系统上自带的并行文件系统——ADIC的StorNext File System和IBM的General Parallel File System——来管理的。除此之外,在每个运行网络文件系统(NFS)的节点上还部署了NetApp FAS840s filer,专门存放大规模系统的元数据。

“过去,我们一直在试图寻找一套更具性价比的基于Linux操作系统的并行文件系统技术,” Wrench介绍说,“我们希望这种技术能够突破网络文件系统(NFS)所面临的性能瓶颈和容量限制。”

Panasas的集群系统上捆绑了一种被称作Active Scale File System(简称PanFS)的独家专利并行文件系统。与基于SAN的文件系统相比,PanFS最大的优点就在于,它不是按照“每节点”收取软件使用许可费的。

“如果按照每节点(或每CPU)的标准付费的话,购买并行文件系统的费用将压得人喘不气来,”Wrench介绍说,“每份许可费的价格大约在1000美元左右。出于控制IT预算的考虑,我们以往只能拼命压制‘扩展系统’的念头。”

当然,Wrench这次并不打算淘汰所有的旧设备,而是将那些原本构筑1级存储层的设备挪到2级存储层上,以后,随着设备使用年限的增加再逐步挪向更低级别的存储层。


相关资讯

今日微信独家

《华尔街日报》报道日前援引知情人士的消息称,由于被美国政府以国家安全问题为由进行调查,联想斥资23亿美元收购IBM低端服务器业务的交易陷入了停滞状态。
关注新浪官博 订阅微信订阅号

订阅焦点周刊

论坛与活动

2016中国数据加速峰会直播专题
2016中国数据加速峰会直播专题[详细]
点击查看

精彩视频

最新文章

1111111
1111111
asdasd
asdasd
同有科技应用型大数据存储在南京掀起智能风暴
同有科技应用型大数据存储在南京掀起智能风暴
斯蒂芬斯蒂芬
斯蒂芬斯蒂芬
京东双11技术备战 构建多中心交易系统
京东双11技术备战 构建多中心交易系统