|
| 中小企业IT网 >> 成功案例 >> 正文 |
| |
| 浙江省四市农联社数据大集中项目 |
|
|
|
|
| 正文字体显示大小: 较小 正常 较大 |
方案正文:
. 需求分析
数据的存储和备份系统是指在四市农联社内部建设一个全辖的数据处理中心(数据处理中心可以由一台或多台不同型号的主机系统组成)，对所存放的数据进行相应的存储管理和备份，使数据在任意时刻应保持完整一致和完整。
1.1. 数据存储备份系统的建设目标
@提高现有系统数据存储的可靠性，提高整个系统运行的安全性，并为之带来无限的存储扩展能力；
@统一的存储，实现存储空间共享；
@实现存储设备统一的管理和存储备份管理；
@简化存储系统，提高存储系统的可管理能力；
@提供海量存储，存储历史数据，为决策提供准确的分析依据；
@统一备份，提高备份效率，提高备份介质的存储能力及管理水平。
1.2. 浙江省四市农联社业务应用现状
浙江省是一个沿海经济发达省份，四家农联社都具有较强的实力，业务和交易均比较繁忙，为了统一业务，提高交易平台档次，保证业务的顺利、安全进行，并适应市场的竞争，因此需要建立一个安全、稳定，性能优异的数据存储及其备份系统。
农联社数据处理中心通常运行有两大类应用系统：
@综合业务系统；
@管理信息系统。
数据存储及其备份系统不仅要考虑综合业务对公、对私日平均交易量，更要考虑高峰时交易量。
2. 详细技术方案
2.1. 设计目标与设计思路
存储/数据的有效管理
采用存储/数据有效管理，配合服务器集中处理，实现高效的业务处理和数据管理，为未来的业务发展开拓更宽广的平台和空间。
高性能
业务处理要能满足每天高峰时的交易量，在CPU强大处理能力的同时，存储系统必须有较高的性能才能胜任。
高可用性与高数据安全性
保证农联社中心业务7X24运行，存储系统必须有极高的可用性。
灵活的扩展性
农联社业务增长非常迅速，要求对存储系统的性能和容量必须有强大的扩展性来满足这种高速发展的要求。
简单易用的管理工具
为了提高系统管理的效率、管理的安全性，存储系统必须有利于使用的存储管理工具。
根据上述设计目标，我们建议数据存储方案采用IBM OPEN SAN解决方案。
2.2. 数据存储设计方案
2.2.1. SAN企业存储解决方案与IBM OPEN SAN
SAN(存域网)是指独立于异构计算网络系统之外的几乎拥有无限存储容量的高速网络。其采用高速的光纤通道作为传输媒介，以FCP+SCSI协议作为存储访问协议，将存储子系统网络化、开放化、虚拟化、智能化，实现真正的高速、安全、共享存储。
@SAN架构下的数据存储管理的优势：
1. 提升存储系统资源使用效率及平衡工作量
2. 持续且具弹性的存储系统运作
3. 改善数据存取速度(Improved data access with reduced latency)
4. 更有效的数据保护作业(data protection)
5. 快速的数据分享(File sharing of a LAN at the speed of a SAN)
6. 集中管理，降低总运作成本
7. 业务数据恢复 (Backup/restore)
8. 存储系统集成
9. 灾难容错 (Disaster tolerance)
10. 高可靠性 (High availability / clustering)
@SAN存储系统五大组成：
1. Server
2. Storage
3. SAN fabric
4. Software
5. Service
@SAN标志特性：
1. 方便转移存储系统於不同服务器间(relocate)
2. 同时处理(LAN-free tape backup/Archive)
3. 分享存储系统及数据库
4. 不同服务器间分享数据
IBM OPEN SAN解决方案是IBM在存储最新技术的结晶，包括完整的存储系统产品线：
@Shark (2105)
@Magstar (3590)
@LTO，Tivoli software
IBM OPEN SAN真正可以提供整合方案及服务：
@存储系统集成 Storage Consolidation
@数据分享 File Sharing/data sharing
@数据安全/备份 Data security/Backup
@磁盘/带共享 Disk/Tape pooling
IBM OPEN SAN解决方案是唯一满足"open SAN solution" 的公司，可容括其他各主要厂商的硬件/软件。
2.2.2. SAN网络集成方案描述
根据四市农联社的现状和议标书的要求，我们为四市农联社设计了以IBM OPEN SAN技术为基础的SAN解决方案，所涉及SAN相关产品包括：
@存储服务器：IBM ESS 2105-F20企业存储服务器
@IBM存储管理软件
@SAN光纤交换机：IBM SAN Fibre Channel
Switch 2109-F16
@SAN 主机光纤卡；
服务器包括了四市农联社的IBM RS/6000 S90、H85、M85。
@存储服务器
根据四市农联社的需求，我们建议采用IBM ESS企业存储服务器作为存储/数据集中系统的存储服务器。在未来四市农联社的业务中，ESS将作为主要的存储平台。
根据对四市农联社集中存储系统存储容量的要求，我们建议采用性能为
2.1TB的ESS，具体配置包含了以下的内容：
存储容量：配置了80块36.4GB磁盘，在RAID-5保护方式下，原始裸盘容量约为2.9TB，实际可用容量为2.1TB(扣除了RAID-5方式的校验盘和热备份磁盘后的容量)。
方便的容量扩展：ESS有效容量最大可扩展至22.4TB。ESS采用了最新的Seascape"海景"架构，性能和容量的扩展十分灵活方便。ESS系统只须增加8个磁盘(9.1GB、18.2GB、36.4GB、72.8 GB)一组的磁盘组，便可从420GB一直扩展到22.4TB的容量。
高速缓存(Cache)：8GB，最大可扩展至64GB。
非易失性缓存(NVS)：384MB，每个Cluster有192MB的NVS缓存。电池保护数据达7天。
处理器：双4路SMP PowerPC RS64II芯片，形成双机Cluster，提供高可用性。
提供4个光纤通道的连接：这种方式可以保证整个系统的高可靠性，当一个通道出现故障时，其它通道会承载数据传输任务；此外，可以利用ESS的SDD数据访问均衡软件动态均衡数据流量，提高I/O性能。同时方便用户增加其它的主机连接。需要时能增加到16个光纤通道。
冗余电源与电池备份：保证ESS电源的可用性以及掉电后仍然可用。
远程支持设备(Remote Support Facility)：允许ESS在检测到系统即将发生问题时自动拨叫系统管理员或支持中心，让问题得到及时的解决。
高度的数据保护：条块化的RAID-5或non-RAID功能，与主机配合灵活的实施JBOD，RAID-0，RAID-0+1。
快捷的数据拷贝：利用ESS的"瞬间拷贝"FlashCopy功能，可以在任何时间迅速完成拷贝，它提供逻辑卷的快速拷贝。例如，FlashCopy可用于同步备份，从生产数据中产生测试数据，检测点，及为智能商务应用进行不间断拷贝。命令发出后所拷贝的数据立即可用。而实施以上的操作，只须在与ESS联网的任一工作站上，通过ESS图形化的管理界面即可完成，从而在不影响生产系统正常运行的情况下，实时地或接近实时地将生产系统数据库中的数据复制用于快速备份，数据仓库与决策支持，灾备，系统实时数据测试，数据交换等，大大提高生产效率。
SAN光纤通道交换机
我们建议使用两台2109-F16型号的16口光纤交换机，配置两台光纤通道交换机的目的是为了避免整个系统在这点上存在单点故障。
IBM SAN光纤交换机是IBM企业存储区域网络的核心部件。IBM的企业存储区域网络为不同厂家的异构服务器和存储设备提供高速互联和中心管理的光纤交换环境。采用IBM SAN企业存储区域网络可以在企业内部随时管理和动态分配IT资源，在降低企业IT管理成本的同时提供存储设备的共享和宽带接入。
主要特点是：
为基于Intel芯片的Windows NT系统和UNIX系统提供高速的光纤连接。
提供企业级的光纤交换能力和高度的容错能力
提供16口和8口两种选择
提供IBM Stor Watch*SAN Fiber Channel Switch Specialist对在IBM企业存储区域网络中的所有交换机进行统一管理
IBM SAN光纤交换机遵循业界标准的光纤通道协议，提供对以下设备的光纤交换连接：
为基于Intel芯片的Windows NT系统
UNIX系统
具有光纤接口的磁盘阵列
IBM数据网关(用以连接只有SCSI接口的磁盘和磁带设备
光纤通道HUB
IBM SAN光纤交换机也提供级联方式的连接。通过IBM和非IBM的光纤交换机和光纤HUB的级联，可以使存储区域网络拥有上百个光纤接口。IBM SAN光纤交换机提供高速灵活的连接方式，并且有很好的容错能力，足以满足绝大多数企业应用的要求---诸如LAN-free 、Server-free的备份，数据共享等等。
IBM SAN光纤交换机每个光纤接口支持200MB/S的全双工数据传输，并且随着端口的增加系统的性能也同步上升。而基于HUB FC/AL的解决方案则在设备增加的同时会降低系统性能。
IBM SAN光纤交换机可以智能地管理SAN并且自动解决一些问题。并且，它可以自动地识别、登记加入的光纤设备，隔离有问题的设备并且自动启用备用路由传输数据。它还提供Zoning的功能对各个端口的访问权限进行定义，从硬件级别保证系统的安全性。当数据流量和网络状态变化时，IBMSAN光纤交换机会对数据流进行自动的流向分配(Re-routing)。
服务器系统与SAN的连接
四市农联社服务器系统需要与SAN实现连接，在服务器中需要配置光纤通道卡，为了保证高可靠性和负载均衡，每台服务器推荐配置两块光纤通道卡。
2.3. 方案的特点
@存储/数据集中
目前，四市农联社的各项业务处理采用了包括UNIX小型机以及PC服务器进行业务处理，存储/数据集中要求对现有系统提供全面的支持。ESS具有多平台/多主机的连接能力，它满足了服务器集中方式对数据存储的要求。同时，ESS可以集中管理和分配存储容量，提高四市农联社的生产效率。
@高性能
四市农联社业务增长非常迅速，要满足未来3～5年内业务处理的要求，磁盘系统数据传输速度要求很高。IBM企业存储服务器(ESS)采用业界最快的160MB/s SSA磁盘阵列，另外ESS中的智能化的Cache结构大大提高了I/O性能，同时ESS中强大的双四路SMP(对称多处理)处理器为服务器提供了出色的存储处理性能。ESS是业界最快的磁盘存储服务器。 IBM企业存储服务器还提供许多先进的功能，帮助用户在运行关键业务的同时，实现高速、大量、广泛的数据访问和共享。其中，Flash Copy功能可以在用户需要的任何时间在瞬间迅速完成数据卷的拷贝，为所需的数据建立即时拷贝，这个拷贝可在任何时候用于备份，大大减少数据备份对生产系统的影响；即时的生产数据卷拷贝，使用户可并行同时运行任务，在大大压缩了工作量的同时提高了生产效率，为企业提供了业务连续性支持。
Flash Copy的主要应用领域有：
@关键业务数据的备份
@工作量压缩
@数据仓库与决策支持
@灾难备份
@系统实时数据测试
@数据交换
@环境刷新
@高可用性与高数据安全性
四市农联社要求保证业务7X24运行，存储系统的可靠性就特别重要。ESS的总体设计和内置部件设计中都保证了容错功能。只有这样，ESS才能承诺随时根据用户的需求进行同步的维护和升级，并且为用户提供一个真正可靠的保证用户关键业务不间断运行的高可用性和高可靠性数据存储系统。ESS是一个企业级的数据存储解决方案，它包括了许多先进的功能，增强了企业数据中心的运作。这些功能的目标是保护企业的数据并提供了高可用性，即使在发生故障时也是如此。双活动处理集群、自动修复故障、瞬时拷贝和热备份、可热插拔磁盘驱动器、冗余电源和冷却系统都为高可用性做出了贡献。不掉电的缓存和高性能的RAID5功能提供了数据保护和完整性。IBM为ESS设计CACHE时就坚持对写入ESS的数据保留两份拷贝，在数据真正写入磁盘前拷贝一份数据保存在NVS(Non-volatile Storage)中，并且NVS由一个电池呵护着；ESS可灵活地配合主机选择JBOD、RAID-0、RAID-0+1、RAID 5等数据储存与保护方式。所有这些细致入微的设计都是为了保证数据的完整性，从而保护用户最为珍贵的数据资源。
进一步，IBM企业存储服务器还配置了功能强大的Subsystem Device Driver(SDD)数据访问均衡软件，实现了多路存取、负载均衡、通道切换，在大大提高系统性能的同时，还提供了数据访问高度保障，主要表现为：
通过多条通道(多达32条)全面提高I/O吞吐率，更快地完成更的任务；
业界领先的自动负载均衡算法智能地管理多条I/O通道的流量，极大地提高了系统的交易处理效率和I/O吞吐率；
出色的动态配置功能大大减轻了系统管理负担；
通过自动故障监测，通道切换，把I/O队列分布到预定的替换数据通道中，保持正常的应用程序运行和信息流；
允许动态恢复已修复好的部件；
@全面提高UNIX和Windows2000等开放平台及群集环境(Cluster)的可用性行灵活性。
强大的扩展性
四市农联社业务增长非常迅速，要满足五年内业务处理的要求，存储系统必须有强大的扩展性来满足这种高速发展的要求。企业存储服务器(ESS)所采用的Seascape海景架构正是面向高速大容量的数据访问，目前已经具有高达22.4TB因此它充分满足随着业务量和新应用的增加而带来的容量增加的要求。
@方便的集中管理工具
存储系统方便的管理工具对四市农联社也是非常重要的，这样能提高人工效率、减少差错。ESS提供了基于Web based的存储管理工具Stor Watch ESS Expert提供简单、灵活和友好的管理方式，并且可以通过网络实现随时随地的管理功能，对ESS进行配置和管理，带来了极大的方便，降低了人工成本。
2.4. 第三代强力存储服务器：ESS 2105 - Model 800
IBM ESS 2105-Model 800是新一代的存储服务器，它提供了空前水平的性能和吞吐率，相对于它的前一代产品ESS 2105-F20，其主要的性能特征如下：
2105-Model 800吞吐率是前一代产品2105-F20的两倍
使用加速的处理器能够提供比Model F20强2.5倍处理能力，增强了扩展能力和加速了响应时间。
支持64GB的超大容量的高速缓存，从而大大增加了缓存命中率和降低了读写存储的响应时间。
内部带宽增长了2倍。使得流式媒体、商业智能、数据仓库等等顺序读写应用的吞吐率大大提高。
具有2倍带宽的大容量NVS(非易失性存储器)大大提高了写密集应用的性能。
对于重要的数据库应用，第三代的Model 800使得响应时间的性能改善了40%以上。
2 Gb/sec的光纤通道卡提供了2倍于Model F20瞬时通过率，不论是开放式系统还是zSerise大型主机环境。
相对于RAID 5，新支持的RAID 10使得数据库类型的交易速度提高了75%。大多数典型负荷的性能的大幅提高也得益于新的RAID 10。某些随机读写、程序行为古怪、具有较少缓存命中率的应用程序也可以从RAID 10中获取性能大幅度改善的好处。
15000 rpm高转速的磁盘驱动器，使得磁盘阵列性能提高了80%以上。相对于10000 rmp的普通磁盘驱动器，响应时间改善40%以上。从而能应付高密度大强度的读写访问。
3. 开放式系统的Magstar3590磁带子系统
Magstar 3590可与下列系统相连接：IBM AS/400，RS/6000，Hewlett Packard，Sun，Microsystem，和其他的SCSI系统；运行Windows NT的Intel系统和IBM S/390系统。 配备光纤及其Ultra SCSI接口，Magstar 3590可获得最大可达40MB/秒的瞬时数据传输速率。
@Magstar 3590E型号的未压缩驱动器数据速率可达14MB/秒，极大的降低了备份与恢复时间。
@Magstar 3590的带有10盘磁带的自动磁带库(ATL)，可随机存取超过1.8TB的压缩数据，是一个低成本的小型磁带库系统。
@Magstar 3590的搜寻速度高达10米/秒，提供对所有存储数据的快速访问。
@Magstar 3590H型磁带可容纳高达60GB容量的数据(非压缩)。
@Magstar 3590H型磁带可容纳高达180GB容量的数据(压缩)
@Magstar 3590具有先进的磁带技术，在数据完整性上，比3480磁带系统提高100倍。
@Magstar 3590磁带子系统带有两个光纤或者Ultra SCSI端口。
@Magstar 3590能够保护对现有的存储设备的投资。
3.1. 极为优秀的性能
Magstar 3590具有领先的成批处理性能和起/停性能。后一点很重要，因为大多数应用是以起/停方式操作的。Magstar 3590的未压缩数据传输速率是最高可达14MB/秒。当使用Ultra SCSI端口时，最以瞬时数据传输速率为40MB/秒。
3.2. 增强的可靠性和完整性
在数据完整性上，Magstar 3590磁带驱动器的设计比3480改进了100倍。Magstar 3590磁带驱逐动器使用双向纵轴蛇行记录技术和第三代磁头。此磁阻磁头可以同时对16个数据轨道进行读写操作。改进的校验码(ECC)和写在磁带上的伺服磁道帮助保证数据的完整性。内置诊断监视程序，监视磁带驱动器的操作，及时发现潜在问题，并帮助快速解决。
两个安装在机柜中的Magstar 3590 B11S装置
3.3. 投资保护
现有的Magstar B11型和B1A型磁带驱动器(B型)可以在现场被升级为新的E和H型，可帮助保护现有的对Magstar 3590的投资。因为新的E型驱动器可以对现有盒式磁带进行读(128轨)和写(256轨)操作，所以介质上的投资也可以得到保护。在推广新的E型产品的同时，IBM将继续提供配备有最新的增强型Ultra SCSI支持的Magstar 3590 B型驱动器。
3.4. 高容量
Magstar 3590E型盒式磁盘具有40GB(加长)的容量(比3480盒式磁盘的容量高出100倍)，使用LZ1压缩技术，最高可存储120GB容量的数据。
Magstar 3590H型盒式磁盘具有60GB(加长)的容量(比3480盒式磁盘的容量高出200倍)，使用LZ1压缩技术，最高可存储180GB容量的数据。
Magstar 3590的金属颗粒磁带介质被放置于一个磁带盒中，其外型尺寸与3490的盒式磁带大小相同，这样，可以使其与目前所使用的介质一起放在一个IBM Magstar 3494磁带库中。配备有Magstar 3590驱动器的 Magstar 3494磁带库可以提供对多达374TB容量的数据的进行访问的能力(以3:1压缩)
3.5. 成本效果
大容量磁带介质意味着只需要较少的设备，较少的盒式磁带及对盒带的装卸。卓越的性能同样可以减少所需驱动器的数量。这样就会降低用于存放盒式磁带，磁带驱动器和磁带库等设备的占地面积。同样，其维护费用也会低于前几代3480/3490型驱动器。 作为一个可重复使用的存储装置，Magstar 3590可以保留现有的装置，并且可以作为一系列存储解决方案的基础。Magstar 3590磁带驱动器是IBM Seascape体系结构的重要组成部分，可以允许其运用在各种存储解决方案之中。
3.6. 易于使用
为了大容量无人化运行，Magstar 3590磁带子系统包含一个标准10-槽的ATL。使用ATL，可以随机存取磁带，就象一个小型磁带库。盒式磁带可以用一个方便的手提式10盘盒式磁带架放置于盒式磁带自动化设施(ATL)中。Magstar 3590配备有一个操作员/服务显示功能以显示设备状态，动作，错误情况和信息。
3.7. 服务
Magstar 3590不需要定期的维护。IBM的客户工程师使用一个内置的子系统面板以执行维护功能。
3.8. 3590型号
Magstar 3590有用于SCSI和Ultra SCSI连接的五个型号：
3590 B11型和E11、H11型是机架装入式，并内置有大容量无人化运行的一个10-盘盒式磁带的ATL，B11型和E11型可能升级为B1A型或E1A。 3590 B1A型和E1A型没有ATL，是设计连接到Magstar 3494磁带库的型号。 具有一至四个B1A型或E1A磁带驱动器的Magstar C12型可提供与Storage Tek 4410 和9310 ACS的连接。 |
|
|
|
|
 |
|
案例锦集 | 应用手记 | 行业方案 | 商务方案
