
Tom Pettigrew在存储和服务器集群方面有20多年的丰富经验,对石油、广电等行业的存储需求和技术趋势颇有研究。
随着全球对能源问题的关注程度不断提高,如何利用先进的IT技术提高石油和天然气的开采效率成了焦点。在这个过程中,存储能发挥什么样的作用呢?本刊记者就此采访了Isilon公司全球销售和渠道开发副总裁Tom Pettigrew。
问:您认为广电行业的存储应用与石油行业有何不同?
Pettigrew:21世纪,数字化和网络化给广播电视和电影制作业带来了巨大冲击,随之而来的是突破传统模式的各种服务,如收费电视、高清电视、移动电视、手机电视、网络电视等。这些服务的业务核心是数据。因此,广电业面临的最大挑战是解决好因数据共享、数据存储和数据处理效率带来的问题。具体来说,这些问题包括如何加快广电数据处理速度,降低运营成本和提高数字资产的利用率。
在石油行业,由于石油勘探地震资料处理流程复杂,地质原始数据文件很大,通常处理流程的分析要占总时间的60%以上,极大地影响了工作的进度和效率。因此,巨大的运算存储空间和存储设备的高I/O吞吐性能才能满足集群服务器运算对数据I/O带宽的要求。
对大型石油系统而言,智能而高效的存储至关重要,这样才能为前瞻性的分析提供有力的支持,为石油任务的实施提供保障。石油数据需要大集中,也需要高效的管理。同时,数据的分散性特点也比较突出,因此系统需要把它们进行有效地存储、整合与处理。
问:在石油行业,高性能计算(HPC)是一个主要应用。HPC正从大型机转向集群式计算。随着计算方式的转变,存储的应用是不是也在发生着变化?
Pettigrew:近几年来,由于CPU能力的迅速提高,标准化硬件成本的迅速降低,相对廉价的Linux并行集群系统渐渐成为HPC的主流,并使HPC进入石油行业和其他应用市场。与此同时,并行化计算的发展带来了更大的系统规模和复杂性,强大的HPC系统需要技术先进、性能卓越的存储系统作支撑。
虽然存储系统容量提升和单位成本下降都很快,但传统存储技术架构对带宽和I/O能力的提高却非常困难且成本高昂。这造成了当原始数据量较大时,I/O读写所占的整体时间就相当可观,成为HPC集群系统的性能瓶颈。除了对存储系统I/O能力的苛刻要求外,HPC对其管理、扩展、可靠和共享访问等各方面的指标也丝毫不妥协。由于管理维护的复杂性,传统存储系统的管理成本加起来往往数倍于其采购成本。
因此,HPC对存储架构提出了极高的要求:带宽性能达到几个甚至几十个GB/s,容量能扩展至PB级;完全透明的访问和数据共享;与生俱来的高可靠性和高可用性;集中式的智能化管理,不因容量和设备数增加而显著增加管理成本;无缝整合其他存储系统,轻松获取和交换数据;集成的数据服务,包括备份、远程复制和生命周期管理;可按需独立扩展容量和性能,保护投资。Isilon IQ正是符合这些要求的集群存储方案。Isilon IQ是第一个能从4TB无缝扩展到1PB的文件系统,也是一个处理能力可扩展到10GB/s的集群存储系统。Isilon IQ集群存储产品完全能满足石油企业对存储的需求,包括对高性能的一级存储、近线归档、磁盘到磁盘的备份及容灾等需求。
问:石油行业越来越多地采用刀片服务器,Isilon的解决方案可否与刀片服务器相匹配?
Pettigrew:当然可以。刀片式服务器作为一种高可用、高密度、低成本的服务器平台,非常适合地震资料处理的要求。刀片服务器超强的运算能力需要容量和性能都非常杰出的存储系统与之匹配。Isilon的IQ群集存储系统能够加速对关键数据的存取,同时急剧降低费用,减少存储和管理的复杂度,使用户有能力把数据转变成信息。Isilon最新的存储集群平台IQ 9000使用了Isilon的OneFS操作系统软件,每增加一个2U单元,性能和容量都会呈线性增长。Isilon IQ的内部通信系统支持高性能的InfiniBand,也支持Windows、Unix、Linux或Mac客户端需要快速读写存取一个很大的共享数据池的大吞吐率、高并发环境,这是非常理想的。其独特的SmartCache功能,结合OneFS的分布式文件系统和文件条带化的特性,加上很大的全局内存缓冲区,使一个单一文件系统能提供无与伦比的总吞吐率。这些都能与刀片服务器的处理能力相匹配。
问:与通用的SAN、NAS解决方案相比,Isilon的解决方案优势在哪里?
Pettigrew:SAN架构适用于数据库这类结构性数据,而对于文件共享这类非结构性数据则是NAS的擅长。然而,传统的NAS要求所有数据都从其控制器出入,造成了性能和扩展性的瓶颈。在大型的非结构化运算中,被处理文件的体积往往非常大,对I/O性能要求非常高,传统存储构架对此已经无能为力。
而Isilon IQ的单个96节点集群和单个文件系统就可以提供1.6PB的存储容量,与其他厂商的NAS产品每文件系统或每卷提供16TB的容量形成鲜明对比。另外,Isilon独特的“按需购买,渐进扩展”(Pay-As-You-Grow)方式,体现了Isilon存储系统的优秀扩展能力,所需要的在线升级只需不到1分钟的时间。Isilon IQ集群存储系统在使用和管理方面也非常方便,一个Isilon IQ集群能够在10分钟内就完成安装、配置和连机使用。通过业内的标准协议,如NFS、CIFS、HTTP和FTP,用户使用Windows、Linux、Unix或Apple Macintosh能很容易地存储和访问数据。客户能够使用NDMP协议很容易地备份和恢复群集数据,用SNMP监控群集的运行,用LDAP、ADS和NIS认证文件存取。这些都大大节约了人力资源和运行成本。
问:Isilon的解决方案能否实现容量及性能的线性扩展?
Pettigrew:我们提供Isilon加速器节点系统,以调节和平衡集群系统的总负载,实现集群系统的可预测快速演算。Isilon独有的TrueScale技术使得客户可以根据实际应用的需要,同时或分别线性扩展其性能和容量。通过增加Isilon的IQ平台节点或IQ加速器节点,可以线性地或独立地给Isilon的IQ存储群集升级吞吐率,直至单一文件系统的总吞吐率达到10GB/s。 |