大港油田数据中心A1A2存储管理与策略优化 |
2012-08-13 10:32 作者:范德军 贺红娟 邓丽 来源:硅谷网 HV: 编辑: 【搜索试试】
|
|
硅谷网8月13日消息 《硅谷》杂志2012年第13期刊文称,简要介绍大港油田数据中心的存储架构,其通过有机融合A1A2项目建设所配备的硬件资源与信息中心已有存储资源,合理优化、高效管理存储区域网(SAN)和网络附加存储(NAS),构建实用、高效的存储体系架构,通过有效管理手段,基本实现勘探开发数据资产的两级备份、三级存储,保障大港油田科研生产关键数据资源的安全,有效地支撑A1A2系统应用。
近年来,随着A1A2系统的建设,大港油田数据中心管理的数据量急剧增长,截至目前,地震原始数据10TB、测井数据5TB、其它专业数据5TB,各类应用服务器系统克隆快速恢复备份数据3T等数据资产总计超过了20TB。经过探索与实践,大港油田数据中心充分发挥A1/A2项目建设硬件资源的作用,有机结合存储区域网(SAN)存储资源与分散的网络存储(NAS)资源,确定并建立了相对完备的存储管理体系,基本保障了数据中心数据资源的安全,有效支撑了油田科研生产工作。
1数据中心存储现状
目前,大港油田数据中心共有服务器近150台,各类应用近80套,数据库系统近50套,数据资产总量超过20TB,基本建成了以存储区域网络(SAN)与网络附加存储(NAS)相辅相成共同支撑数据存储与应用的整体存储架构。存储框架主体以A1/A2项目建设的SAN存储网络为核心,总存储容量达到100TB,采用NFS、FTP、匿名共享和IBM的TSM存储管理软件等手段相结合,实现了SAN支撑大型数据库与重要应用的在线存储(主要是A1/A2相关应用),NAS支撑数据备份、应用备份、关键系统备份的异机集中备份存储(主要用于A1/A2之外的原有应用系统)、3494自动带库支撑大块数据(地震与测井)的近线存储、3584自动带库支撑关键数据的离线备份存储,实现了在线、近线、离线三级存储机制,最大限度的保证了数据资产安全。
实践发现,目前的存储架构尚存在以下问题:
存储空间容量不足,EMC磁盘阵列容量(裸容量12TB)难以有效保障数据主库(PCEDM、测井、地震、成果)、项目研究环境等在线存储支撑,需要扩容;离线备份带库(3584)容量仅有40TB,也需要扩容;尤其是大港油田大歧口凹陷科技专项的启动,以现有的条件,无法支撑项目研究环境有效运行。
备份存储设备(NAS,第一级备份)性能低,存在安全隐患(出现过两次磁盘坏的情况),另外,容量不足,不能满足日益增长的数据备份的要求。
异地容灾备份机制不够健全,目前,只有财务数据实现了异地容灾备份,油田勘探、开发、生产数据不具备容灾备份条件,存在数据安全隐患。
2方案优化与存储管理策略
根据大港油田A1A2应用需求和数据中心发展趋势,在现有的存储构架下,扩展EMC磁盘阵列容量,支撑主库、项目研究环境应用;扩充3584带库存储容量,海量数据采用磁带实现离线备份;提高备份存储容量与设备性能,支撑数据集中备份;部署异地容灾备份NAS,通过局域网,实现重要数据异地容灾备份
数据中心的应用存储与备份支撑,分为两部分,一部分,以A1/A2整体框架为代表,应用先进的SAN存储网络支撑在线应用与备份;另一部分,为近年来逐渐建设起来的各类专业应用,这部分应用,由于建设过程中的技术与资金限制,大部分使用本机资源存储,既数据库与前台的WEB服务同在一台机器,自成体系支撑单一的应用服务。为此,对这部分应用的备份,采用内网方式,部署NAS存储,应用共享、FTP和TSM管理软件,实现局域网内分散的专业应用系统的自动备份与存储支撑(如图存储管理优化示意图)。
图1存储管理优化示意图
如图所示,A1/A2相关的应用与系统的备份通过TSMserver1备份到3584自动带库,A1/A2相关的数据库备份通过RMAN脚本调用TSM的数据库代理,备份集直接存储到预先设置好的存储池,备份的留存时间、更新周期等通过设置策略来自动实现。分布在LAN内的独立应用与数据库(A1/A2之外的应用系统),通过内部的LAN备份到TSMserver2服务器,此备份服务器应用廉价NAS作为存储设备,根据数据中心职能分别建立4个存储池,分配给各专业应用,针对不同的应用和信息系统制定了4种不同的策略域、策略集、管理类、BACKUP(备份)与ARCHIVE(归档)组,以实现不同的备份需求,TSMserver1与TSMserver2之间通过TSM的servertoserver技术集成在一起,实现TSMserver2重要数据到3584带库的二级备份。
考虑到关键数据的更高层次的安全,异地容灾必不可少,对于重要数据库数据(如财务数据库、资产管理数据库),勘探开发专业数据等,采用部署异地NAS文件服务器,通过FTP、匿名共享、NFS等方式定时、自动传输到备份站点。
通过优化管理,数据中心不仅能充分利用已有的存储资源,使A1/A2相关的存储设备有效的融合到整个数据中心数据存储备份体系中,使大港油田数据中心的数据存储、备份真正建立了有序存储,实现了数据的两级备份、三级安全存储及异地容灾。
3结束语
通过A1/A2信息项目的实施,不仅极大的促进了大港油田勘探开发数据资源建设与相关应用系统的建设,而且完善了大港油田数据中心的存储体系架构,实现了油田数据资产的安全存储、高效利用。(原文载于《硅谷》杂志2012年第13期,硅谷网及《硅谷》杂志版权所有,未经允许禁止转载)
|
|
|
|
【对“大港油田数据中心A1A2存储管理与策略优化”发布评论】 |
版权及免责声明:
① 本网站部分投稿来源于“网友”,涉及投资、理财、消费等内容,请亲们反复甄别,切勿轻信。本网站部分由赞助商提供的内容属于【广告】性质,仅供阅读,不构成具体实施建议,请谨慎对待。据此操作,风险自担。
② 内容来源注明“硅谷网”及其相关称谓的文字、图片和音视频,版权均属本网站所有,任何媒体、网站或个人需经本网站许可方可复制或转载,并在使用时必须注明来源【硅谷网】或对应来源,违者本网站将依法追究责任。
③ 注明来源为各大报纸、杂志、网站及其他媒体的文章,文章原作者享有著作权,本网站转载其他媒体稿件是为传播更多的信息,并不代表赞同其观点和对其真实性负责,本网站不承担此类稿件侵权行为的连带责任。
④ 本网站不对非自身发布内容的真实性、合法性、准确性作担保。若硅谷网因为自身和转载内容,涉及到侵权、违法等问题,请有关单位或个人速与本网站取得联系(联系电话:01057255600),我们将第一时间核实处理。
|
|
|
|