项目背景:
数据处理业务平台是“十二五”海洋观测卫星地面系统的基本支撑与运行平台,是地面系统高效、稳定、安全可靠运行的重要保障。本包数据处理业务平台建设范围主要包含牡丹江备份中心的主机系统、存储系统。
Ø 存储系统需求
建设内容要求
备份中心存储系统合理配置中端磁盘阵列用于数据异地同步,同时为保证数据的安全性,符合数据管理要求,配置对象存储设备和磁带库用于数据的永久保存。
数据备份中心存储系统组成需求
牡丹江数据备份中心系统采用 FC-SAN 技术构建在线存储系统与近线存储系统,磁盘、磁带机与主机之间的数据传输速率可达8Gbps,满足备份业务对数据高速存取的要求;并通过数据复制软件,实现数据中心存储系统与数据备份中心数据同步。
数据备份存储×1 套:配置总容量 60TB 的高性能 SAN+NAS 一体化存储。
数据归档存储×1 套:配置总容量不少于 1.5PB 的海量对象存储设备。
备份中心带库×1 套:配置 4 个 LTO-7 磁带机,300 个槽位。
SAN 交换机×2 台:每台配置 24 个 16Gb 光纤模块。
存储管理要求
海洋观测卫星地面系统的数据由多台服务器、工作站共享,需使用 SAN 文件共享软件对数据文件进行共享管理。海洋观测卫星地面系统的数据采用在线、近线、离线分级存储策略,应选择高性能的存储管理软件对数据进行迁移和归档管理。
数据归档管理
可以按项目、时间定期将近线存储上的数据归档到离线存储上,在需要恢复时将离线存储上的数据恢复到近线存储上,进行数据生命周期管理。
归档管理软件负责触发数据在磁盘阵列、磁带库以及离线磁带之间的数据归档。满足生产以及用户对存储在盘阵、磁带库以及离线磁带上各级产品数据的需求,并将数据长期归档存储在磁带介质上。
归档管理软件包括数据归档、数据恢复、磁盘阵列数据清理等功能。数据归档模块定时搜索数据库,发现等待归档的任务时,将数据从盘阵归档至磁带库,并更新数据库中相应表的状态。数据恢复模块定时搜索数据库,发现等待恢复的任务时,将数据从带库或离线磁带恢复至盘阵,并更新数据库中相应表的状态。磁盘阵列数据清理模块负责将盘阵上的数据按照预定策略清除、并更新数据库中表的状态。系统对每一个用于作归档的磁带自动加入一个电子标签,同时在软件中提供了识别标签的功能,如果磁带外面的标签脱落,可通过索引来获取该磁带的内容。归档管理由存储管理软件实现。
Ø 备份系统需求
建设内容
本项目将在牡丹江地面站建立数据备份系统,用于本项目的数据级备份。北京数据中心主要负责本地数据备份,为保证数据的安全性,异地采用存储异步复制及备份软件远程复制功能进行数据级备份。
备份系统主要由磁盘阵列、磁带库、数据备份服务器、数据备份软件组成。
备份系统建设要求
备份系统采用 Lan-Free 备份架构,备份服务器部署备份系统的服务器端,作为整个备份的控制中心;需要备份的服务器安装备份系统的客户端。备份信息控制流,通过以太网进行传输;备份数据流通过 SAN 网进行传输。当备份服务器发起备份任务时,各应用服务器上备份软件调用数据库代理,在线读出待备份数据发送给备份系统介质管理模块,并写入备份存储系统。
数据异步采用存储复制技术,通过存储远程复制功能,实现对数据的异步复制。
异地数据备份需求
基于存储复制软件实现同构或异构存储系统之间的远程数据复制功能,建设异地的数据复制系统。
数据复制方式需求
通过存储复制软件实现同构或异构存储系统之间的远程数据复制功能,通常采用基于磁盘日志文件的技术,可以保证远程数据的一致性和完整性,同时,极大的降低了存储系统CACHE和通信链路带宽的需求。
当服务器端发出一个写操作时,写 I/O 按照写发生的顺序保存在主存储系统的日志卷(JNL)中,远端的存储系统通过发出读日志命令从主存储系统的日志卷(JNL)中读取记录并将其写到本地的日志卷(JNL)中,然后将该记录更新到本地的数据卷中。
数据复制策略需求
北京数据中心到牡丹江备份中心的数据初始化同步模式是异步方式,远程数据同步是“拉”数据的方式,即由异地(牡丹江)远端的存储系统从北京数据中心的存储系统“读”数据,从资源消耗和业务应用系统影响考虑,此数据初始化同步影响较小。
牡丹江备份中心到北京数据中心数据异步复制涉及超远距离数据传输,应考虑远程链路带宽,可采用增量数据同步手段解决数据异步复制的需求。
数据恢复策略需求
如北京数据中心发生磁盘阵列异常 down 机等特殊情况时,系统管理员可通过存储管理软件,挂载异地(牡丹江)备份盘进行系统临时恢复,当北京数据中心恢复正常,进行存储远程同步后,切换到本地磁盘,应用恢复正常使用。
解决方案
Ø 设计拓扑图
数据处理业务平台是“十二五”海洋观测卫星地面系统的基本支撑与运行平台,是地面系统高效、稳定、安全可靠运行的重要保障。牡丹江备份中心的建设是为了保障把主中心数据及时有效的备份到备份中心,真正做到数据多地保护。未来无论发生何种灾害,都能保证及时、高效的恢复出数据。
为了配合此次备份中心平台的建设,需要在牡丹江备份中心对存储系统和数据备份系统做新购。根据此次采购方要求,我司将为甲方提供如下设备,协助用户建设备份中心的信息系统平台。
同时我公司将配合甲方进行数据联调、数据互通和系统集成工作;保证北京和牡丹江两中心数据互通,北京中心数据可以通过设备软件和平台软件备份到牡丹中心,做到数据在牡丹江中心的及时归档。
此次牡丹江备份中心涉及磁带库1套、SAN交换机两个、数据备份存储1套、数据归档存储1套、数据迁移管理软件1套;通过迁移管理软件,及存储自身软件,实现数据在存储和带库上的归档备份。
磁带库:此次采购的磁带库是甲骨文的SL150,配置300盘LTO7磁带;配置 LTO7 磁带驱动器4 个,可扩展到30 个,配置8Gb FC接口。配置 10 盒清洗带;配置磁带槽位扩展无需授权许可;完全满足用户磁带库的需求
SAN交换机:配置FS6505 SAN交换机两台,配置24口16Gb端口,并且全激活满配光模块。2台SAN光纤交换机可以用来构建牡丹江备份中心冗余SAN网络。完全满足用户SAN交换机的需求
数据备份存储:配置宏杉MS3000G2数据归档存储一套,配置2 个 SAN 控制器(SAN 控制器不包括外接虚拟化网关或者 NAS 控制器等),最大可扩展16 个 SAN 控制器;配置独立的一级高速缓存256GB;配置 16GB FC 接口8 个,配置 10Gb iSCSI 接口4 个,配置1Gb iSCSI 接口6 个,双控最大支持42 个接口;配置后端磁盘通道8 个,SAS3.0 规范,总带宽384Gb;配置 48 块 1.2TB 10K SAS 盘。宏杉MS3000G2在数据保护方面、性能方面、温度方面都有着自身特色产品,完全满足此次用户的数据备份存储需求。
数据归档存储:配置宏杉对象存储(OPENFS+NS2300+MS3000G2)1套。此套对象存储由数据计算节点+共享容量节点+数据交换节点组成。其中计算节点为NS2300,配置4个NS2300节点,每个节点的缓存64GB,每个节点配置 2 个 16Gb FC 接口,每个节点配置 4个 10Gb 接口。同时融合OPENFS软件系统,该系统配置 NFS、CIFS、S3 协议等,构建了面向对象存储平台;数据共享容量节点采用MS3000G2,MS3000G2配置1个节点,每节点配置缓存256GB(不含 SSD、FLASH、NAS缓存等),容量节点配置 16Gb FC 接口8 个;容量节点配置 40Gb 接口4 个,容量节点配置 12 块 480GB 的 SSD和 188 块 8TB SAS 硬盘。完全满足此次用户对数据归档存储的要求。
数据迁移管理软件:配置爱数anybackup 6.0企业版归档软件。Anybackup数据迁移归档软件能够通过安装在备份服务器上,可以实现数据到磁带库的迁移归档。完全满足此次用户对于数据迁移管理软件的要求。
此次北京中心涉及数据持续保护平台1套、数据备份系统2套、数据迁移管理软件1套;通过迁移管理软件,实现数据的连续保护和备份。
数据持续保护平台:本次配置爱数anybackup 6.0 VX1280一体机一套。配置标准机架式设计,磁盘槽位16盘位;配置 2 颗至强六核处理器、128G缓存、2 个 8GbFC 端口、2 个万兆网口、4 个千兆网口;实配磁盘12 盘×4TB 企业级 SATA 硬盘,可扩展盘位数128 盘,并配置 48TB 容量授权;设备系统基于存储专用的 64 位 UNIX 嵌入式系统,存储系统及软件功能预装在独立的存储介质中,不占用RAID 硬盘组的存储空间。配置需要的全套软件;完全满足此次用户对数据持续保护平台的的要求。
数据备份系统:本次配置爱数anybackup 6.0 VX1210 一体机2套。配置磁盘槽位≥16 盘位;配置 2 颗至强 6 核CPU,缓存64GB,万网口2 个,8Gb FC 口4 个;实配磁盘16盘×4TB企业级SATA硬盘以及相应VTL备份容量授权,可扩展盘位数128 盘;设备系统基于存储专用的 64 位 UNIX 嵌入式系统,存储系统及软件功能预装在独立的存储介质中,不占用RAID 硬盘组的存储空间;支持通用 RAID 0、1、5、6 等多种 RAID 方式,同时要求具备多重数据校验技术;支持重删功能,且重删方式必须基于存储端实时重复数据删除,可调节重删数据块大小。配置全套软件授权。完全满足此次用户对数据备份系统的的要求。
数据迁移管理软件:配置爱数anybackup 6.0企业版归档软件。Anybackup数据迁移归档软件能够通过安装在备份服务器上,可以实现数据到磁带库的迁移归档。完全满足此次用户对于数据迁移管理软件的要求。