电力系统多源异构数据的存储管理技术研究

(整期优先)网络出版时间:2019-03-13
/ 2

电力系统多源异构数据的存储管理技术研究

韦广军刘川

(南瑞集团有限公司国网电力科学研究院有限公司211000)

摘要:海量数据的增加,对电力公司的运行带来了新的问题,如何能够对相关数据进行高效的计算与存储,则成为了需要解决的关键点。在本文中,将就电力系统多源异构数据的存储管理技术进行一定的研究。

关键词:电力系统;多源异构数据;存储管理

1引言

在现今智能电网发展的背景下,电力公司在运行当中也将形成海量的数据,对其工作开展带来了挑战。对于多源数据,也需要电力公司能够采取新的方式进行解决。在该种情况下,即需要能够做好新的技术应用,实现数据处理效率与能力的切实提升。

2多源异构数据存储

对于该技术来说,其作用即是存储海量数据,能够对现今电力公司在运行当中的数据增长情况进行较好的应对,在对数据进行分类的基础上存储相关数据。在该技术中,分布式数据存储是其中的关键技术,以此对分类存储进行实现。该技术具有一定的扩展性,当根据实际生产需求对存储能力进行增加时,对服务器添加即能够实现目标,而不需要重新设计存储结果,且在具体存储性能方面也不会下降。对于电力公司,即可以联系业务需求情况对数据存储系统进行缩减或者增加,在对存储资源池中数据进行增删的情况下也不需要对系统运行进行中断。在具体的存储形态方面,即需要对多管理者并发数据读写进行考虑,即保证不同管理者在对存储服务器进行访问后,对统一的数据进行获得。

3存储管理技术

为了保证数据在实际存取中在性能、可用性以及可靠性方面都具有较好的表现,较多的新技术在此过程中得到了研发与应用。其中,RAID重构、磁盘保险箱技术、LUN拷贝以及BBU掉电保护是保证技术可靠性的重点方式。SAS技术、FcOE以及iSCSI技术能够保证技术的可扩展性。Cache预取以及回写技术则在性能方面具有较好的表现。对于这部分技术来说,都是实际系统数据存储当中的有效技术,其中,smartthin技术是多源异构数据系统中具有较高应用价值的技术,该技术在空间利用率以及可用性方面都具有较好的表现,具有着存储容量的虚拟化特性。在实际应用中,该技术仅仅从存储池中各对实际应用的空间进行分配即可,对于该种根据需求所分配的技术来说,即能够在较少初期投入的情况下对用户在存储容量方面的需求进行满足,以此保证存储系统在可扩展性以及利用率方面具有好的表现。在实际应用中,且也能够在线扩容,在具体扩容中,并不需要对数据进行备份或者迁移处理,在对该过程中可能存在风险进行避免的基础上对数据备份所带来的成本进行了有效的节约。同时,其也能够为用户做好自动化容量管理功能的提供,使用户在工作中不需要对不同业务对不同的容量进行配置,通过自身容量竞争机制的存在,则可以帮助相关业务通过竞争的方式对所需容量进行获取,最终实现配置的优化目标。同时,也可以为其所在存储池做好告警阙值的设置,当程序存储池容量同该阙值较为接近时,系统则将发出告警信号,提示工作人员进行容量的扩充。

在具体技术处理中,对按需分配目标进行实现的技术有两个。首先,即通过读写重定向方式对数据读写提供支持,其次,即通过写时空间方式对空间进行分配。对于第一种方式来说,主要是在读写时以映射表为基础进行重定向处理,对于第二种方式则是具有动态分配空间的技术,具有不确定数据分配存储区域,在具体应用中,需要通过映射表的应用对逻辑地址同存储位置间的关系进行记录。

4存储保护方式

在企业运行当中,数据具有十分重要的作用,对此,做好数据的保护则成为了具体工作当中需要重点解决的问题。

4.1灾备机制

该机制在实际应用中,是系统在受到不可抗力破坏情况下,依然保持服务提供的方式,即保证业务功能以及数据安全不会受到影响。为了保证数据安全性,对系统的风险抵御能力进行提升,对异地灾备系统建立则成为了现阶段企业发展的关键趋势:第一,灾备系统建设是对信息安全进行保证的关键基础,能够对信息系统突发事件的应对水平进行提升,目前在较多行业当中得到了应用;第二,对于灾备系统而言,即是在不同灾害情况下对数据信息进行快速恢复的能力,能够在对风险应对能力进行提升的基础上实现风险响应时间的缩短,使企业以此获得更高的应急能力。总的来说,为了进一步保证信息安全,电力公司即需要做好数据灾备系统的建立,其主要目的即是对企业数据本端到灾备端的数据复制进行实现,以此在发生灾害后,能够从灾备端回传数据恢复使用。

4.2容灾机制

对于该机制来说,即在发生灾难后,保证原有数据不会受到破坏、不会出现丢失情况,即为数据的远程备份。为了避免数据中心在运行当中受到毁灭性影响,在快速恢复的情况下对业务的连续性进行保持,即可以对该技术进行应用,在不恢复的情况下将复制卷实现对主机的映射,以此对正常读写功能进行实现。该技术在实际应用中体现在:第一,主机层数据恢复。这是在服务器上使用的数据复制软件,当灾害发生后,通过对软件的恢复即可以获得数据,在兼容性以及投入性方面具有较好的表现;第二,网络数据数值,即具有复制功能的存储虚拟化功能设备,能够最大程度降低对服务器性能的影响。

5结束语

在电力企业运行中,对于数据的存储与保护是一项重点工作。在实际工作开展中,即需要能够对该项工作引起重视,积极做好存储保护技术的研究应用,以此保障电力企业的稳定运行。

参考文献

[1]张梦瑾.异构数据资源整合的方法与系统实现[J].信息与电脑(理论版).2018(01).

[2]曾汪旺,谢颖夫,胡光阔.多源异构数据整合系统在医疗大数据中的应用[J].价值工程.2017(08).

[3]沙立成,张岩,张璇,郭冬山,王海霞,胡军,雷一鸣.电网多维异构数据融合三维可视化方法[J].自动化与仪器仪表.2017(07).