-
题名电网大规模数据仓库的数据接入研究与设计
被引量：11
- 1
-
-
作者
李子乾
王乐之
张云志
张旭坤
-
机构
国家电网公司客户服务中心
南瑞集团有限公司(国网电力科学研究院有限公司)江苏瑞中数据股份有限公司
-
出处
《计算机应用与软件》
北大核心
2018年第8期180-185,共6页
-
文摘
随着电网业务量的不断扩大,业务数据正向着更加海量与多元化的方向发展。使用大数据技术存储、处理与分析业务数据已经成为电力行业发展的必由之路。数据仓库是大数据分析的重要组成部分,如何将业务数据高效地接入数据仓库是现今实际生产环境中的一大难点。经过对当前电网业务数据的种类与特点的分析,结合实际应用场景需求研究并提出一种复合式的数据接入方案。结合数据同步复制、数据抽取转换装载等技术,在数据同步复制过程中创新性地提出将所有删改操作转换为增操作进行记录的方式,采用多级架构实现海量结构化业务数据接入数据仓库,具有较高的可行性和应用价值。
-
关键词
电力行业
数据仓库
数据同步复制
大数据技术
结构化数据
-
Keywords
Electric power industry
Data warehouse
Data synchronization replication
Big data technology
Structuring data
-
分类号
TM769
[电气工程—电力系统及自动化]
TP311.133.1
[自动化与计算机技术—计算机软件与理论]
-
-
题名一种实时数据库的分布式存储方法
被引量：6
- 2
-
-
作者
周淳
李贤慧
-
机构
南瑞集团有限公司(国网电力科学研究院有限公司)江苏瑞中数据股份有限公司
-
出处
《计算机系统应用》
2019年第4期125-130,共6页
-
文摘
随着网络技术迅速发展,各实时系统产生的数据量呈指数级增长,各业务应用对海量数据的管理和应用的实时性提出了越来越高的要求,现有的单机实时数据库技术已无法满足需求,将分布式思想引入实时数据库领域,主要从数据分布方式、数据冗余备份、数据一致性等方面做了研究,并提出一种实时数据系统中的数据分布式存储的设计.该设计可以为当前实时数据库扩展性及可靠性方面提供技术支撑.
-
关键词
实时数据库
分布式
分布规则
一致性
元数据表
-
Keywords
real-time database
distribute
distribution rule
consistency
metadata table
-
分类号
TP311.13
[自动化与计算机技术—计算机软件与理论]
TP333
[自动化与计算机技术—计算机系统结构]
-
