基于Hadoop框架在电力大数据技术的探究

基于Hadoop框架在电力大数据技术的探究

论文摘要

现如今电力大数据成为电网智能化发展的重要支撑部分。如何对它们高效的并且低成本的收集、挖掘、存储、处理并合理的进行开发是重中之重。本文对现今Hadoop框架、在国内外的应用进行简单了的介绍;对大数据技术以及电力大数据进行详尽介绍,分析其特点,给出了基于Hadoop框架的电力大数据技术平台架构,通过举例简析重点介绍了在电力大数据在预处理阶段的关键技术。通过上述分析介绍得知在电力大数据的多样、高速、大量,与Hadoop平台的高效、低成本、可并行处理等特点是非常契合的,所以二者相结合会为电力大数据的处理带来极大的提升。

论文目录

  • 1 Hadoop平台
  •   1.1 Hadoop概述
  •   1.2 HDFS概述及体系结构
  •   1.3 MapReduce概述及体系结构
  • 2 电力大数据
  •   2.1 电力大数据定义及其来源
  •   2.2 电力大数据特点
  •   2.3 基于Hadoop的电力大数据平台建设
  •   2.4 大数据预处理技术
  •     2.4.1 数据清洗
  •     2.4.2 数据集成
  •     2.4.3 数据变换
  •     2.4.4 数据规约
  •   2.5 数据预处理后的效果
  • 3 结论
  • 文章来源

    类型: 期刊论文

    作者: 蔡晓晨,徐勇

    关键词: 电力大数据,数据预处理技术

    来源: 信息技术与信息化 2019年12期

    年度: 2019

    分类: 信息科技,工程科技Ⅱ辑

    专业: 电力工业,计算机软件及计算机应用,自动化技术

    单位: 吉林建筑大学

    基金: 吉林省科技发展计划项目,项目名称:动态异构空间信息与知识服务研究,编号:20170101081JC

    分类号: TM76;TP311.13

    页码: 254-256

    总页数: 3

    文件大小: 1159K

    下载量: 131

    相关论文文献

    标签:;  ;  

    基于Hadoop框架在电力大数据技术的探究
    下载Doc文档

    猜你喜欢