当前位置:大学毕业论文> 专科论文>材料浏览

关于数据中心论文范文写作 基于大数据的四大数据中心共享融合方法相关论文写作资料

主题:数据中心论文写作 时间:2024-02-24

基于大数据的四大数据中心共享融合方法,此文是一篇数据中心论文范文,为你的毕业论文写作提供有价值的参考。

数据中心论文参考文献:

数据中心论文参考文献 大数据时代论文关于大数据的论文大数据杂志有关大数据的论文

在建设坚强智能电网的新形势下,智能电网对信息化的支撑能力提出了更高的要求,自2009年国家电网公司信息化建设提出了“信息化建设和智能电网的发展还存在一定差距”的问题以来,建立的SG186工程在近几年的信息化建设中有效地提升与改善了信息资源的集成、信息系统的应用深度和实用化、生产控制与管理业务的联动效果.建设完成后,信息化系统从上万套精简至2300余套、所有各项业务处理周期缩短了30%、财务月结速度平均缩短50%、电费资金到帐时间缩短70%等,产生了极大的社会与经济效益.但在后续发展中仍然面临以下问题:

四大数据中心间数据仍然存在信息壁垒.四大数据中心的建设初衷,即实现国家电网数据资产的统一管理、集中利用,但四大数据中心间的数据互通、数据共享仍不能完全满足,进而间接的形成了新的信息壁垒.

各数据中心间交集过少,业务需求分散.四大數据中心的基础数据均来源于业务部门,但各数据中心之间的数据并未产生过多的交集,导致业务部门数据分离存放,不同业务部门之间的不同类型的数据无法更深层次的利用.

数据价值挖掘的基础数据不足.现有四大中心共存的情况下,各中心数据之间依然存在壁垒.形成四大数据中心的共享融合体系后,将各中心的数据统一进行管理、分析,使四大数据中心的基础资源融为一体,扩大了数据覆盖面,此时将会做到到更好的收益.

一、四大数据中心概述

依据“统一领导、统一规划、统一标准、统一建设”的建设原则所建立的四大数据中心,作为SG-ERP的基础支撑平台,对外提供公共服务及工具,满足公司各项业务对数据全生命周期的管理及利用需求,均承担着重要的使命:

(一)结构化数据中心

结构化数据中心建立了一个标准的、开放的模型,提供通用的数据接口,以满足发电、输电、变电、配电、用电和调度环节的数据需求.结构化数据中心建设以来,形成了全网统一的管理标准、编码、模型和数据的工具.

(二)非结构化数据管理平台

开展非结构化数据管理平台的技术研究与建设,有利于在公司范围内建立统一的非结构化数据管理标准,逐步消除数据孤岛,促进业务流程规范融合、运营管理高效协同,将非结构化数据贯穿企业日常生产、经营、管理和决策全过程,集中体现了公司信息化建设的整体工作思路

(三)海量历史准实时数据管理平台

各单位智能电网调度技术支持系统(SG-OSS)、输变电状态在线监测系统、用电信息采集系统、能效管理数据平台、配电自动化系统等的试点建设和推广,不断产生大量实时数据,继而沉淀形成了海量的历史数据,这些数据是公司的重要资产,是实现精益化管理的重要基础,需要通过海量历史/准实时数据管理平台实现这些数据的集成与共享.

(四)电网GIS空间信息服务平台

电网地理信息系统(GIS)作为一种电网资源综合集成管理与可视化分析的有效手段,可广泛地应用于电网企业的发电、输电、变电、配电、调度、营销、通信等各个专业,对有效提高数据采集、分析、处理能力,提供电网分析辅助决策支持,降低企业生产运营风险.平台通过与各业务系统的集成,构建统一数字化电网,提升电网的精益化管理水平,建设了开放式的、面向企业级应用的电网空间信息服务平台.

二、国内外大数据共享融合

(一)某大型企业大数据融合整体规划

该企业大数据包含着大量的信息,需要通过大数据技术支撑数据价值的深度挖掘,为社会提供更多的信息便利.电信行业大数据主要面临数据规模大、关联查询复杂、即席查询多三方面的问题,在国内,解决上述问题的主流思路是:以基于MPP架构的新型数据库集群作为大数据处理平台的核心,管理结构化大数据.使用基于Hadoop的数据处理技术管理非/半结构化大数据,并用事务型数据库(如南大通用BC-RDB系统)支撑在线业务系统,这两者同时为MPP架构的新型数据库集群提供数据支撑.

(二)某大型企业的大数据分析处理架构

数据源:除该种方法之外,还可以分为离线数据、近似实时数据和实时数据.数据存储的结构,其中重点是流数据,它的核心就是数据的连续性和快速分析性;

计算层:内存计算中的Spark是UC Berkeley的最新作品,思路是利用集群中的所有内存将要处理的数据加载其中,省掉很多I/O开销和硬盘拖累,从而加快计算.而Impala思想来源 于Google Dremel,充分利用分布式的集群和高效存储方式来加快大数据集上的查询速度,近似实时查询;底层的文件系统HDFS, 也就是Hadoop的底层存储.上层的YARN就是MapReduce的第二版,综合起来,就是Hadoop最新版本.基于之上的应用有Hive,Pig Latin,这两个是利用了SQL的思想来查询Hadoop上的数据.

三、四大数据中心共享融合方法实现

国家电网公司在十二五规划中,完成了虚拟池的建设,对业务系统与数据库进行纳管,其为数据中心的共享融合提供基础.对于大数据来说,是需要更强的决策、洞察发现力和流程优化能力来适应海量、高增长率和多样化的信息资产;仅湖北公司,其四个数据中心的总量数据,以每年约5T的速度飞速增长,特别是非结构化与海量的数据,结构化和GIS的数据相对增长平滑.

(一)共享融合的技术方法研究

共享融合,技术架构上遵循四层模式,其核心优势如下:

Hbase+HDFS—更高效数据仓库:

HDFS在对超大文件、流式的访问数据、硬件需求上均有较大优势,而引用Hbase将大量小文件的存取效率提升.

Storm+Spark—更高效的分布式计算系统:

Spark在内存分布式计算框架有绝对的优势,而Storm的并行使用提升了实时流数据的处理效率.

结论:关于数据中心方面的的相关大学硕士和相关本科毕业论文以及相关数据中心论文开题报告范文和职称论文写作参考文献资料下载。

人工智能大数据和集团财务共享中心的结合
摘要:随着人工智能、大数据、云平台的广泛运用,集团层面组建财务共享中心时机已经成熟。通过建立财务共享中心能实现会计处理的规范化、流程化、标准化和。

大数据背景下财务共享中心绩效管理探究
在大数据的背景下,云会计技术在集团企业财务共享中心中占据着重要的地位。本文为了进一步优化我国的企业财务共享中心的绩效评价体系,从绩效评价、信息整。

大数据环境下财务共享服务中心构建
【摘要】财务共享服务中心作为一种新的财务管理模式,正在许多公司中推广应用。财务共享服务中心可以协助企业将一些内部职能整合到一个独立的核算中心,以。

大数据时代云会计财务共享中心绩效管理
摘要:当今时代,信息技术已经全面普及,在这个“大数据时代”的格局网中,企业的管理也需要进行新的变动与改革。为了应对企业越来越高的管理需求,许多集。

论文大全