多源异构遥感大数据的高性能存储技术研究

多源异构遥感大数据的高性能存储技术研究

论文摘要

为了提高多源异构海量遥感数据处理流程中存储系统的性能,研究了自适应内存缓存机制在遥感数据存储中的应用.首先使用Alluxio建立统一的虚拟文件系统,并研究了基于空间关系及历史数据访问推理的缓存机制.其次引入了基于内存运算的Presto作为遥感数据元信息的存储组件,为海量的遥感数据元信息及高级语义信息提供实时的读写支持.实验结果表明,相对于使用传统存储方式的流程,使用自适应内存缓存遥感数据存储系统的流程处理耗时减少18%以上,该存储系统对提高遥感数据处理效率贡献显著.

论文目录

  • 1 系统的组成结构
  • 2 遥感数据的读写过程分析
  •   2.1 数据的写入
  •   2.2 数据的读取
  • 3 条件随机场缓存策略
  • 4 实验分析
  •   4.1 实验环境与实验数据
  •   4.2 实验结果与分析
  • 5 结论
  • 文章来源

    类型: 期刊论文

    作者: 杨景玉,张珩,李宝文,吴磊,高德成

    关键词: 遥感数据存储,缓存机制,条件随机场,并行数据库

    来源: 兰州交通大学学报 2019年01期

    年度: 2019

    分类: 工程科技Ⅱ辑,信息科技

    专业: 航空航天科学与工程,计算机硬件技术

    单位: 兰州交通大学电子与信息工程学院,甘肃省人工智能与图形图像处理工程研究中心,兰州铁路局计划统计处,甘肃省计量研究院

    分类号: TP333;V443.5

    页码: 50-56

    总页数: 7

    文件大小: 1427K

    下载量: 305

    相关论文文献

    标签:;  ;  ;  ;  

    多源异构遥感大数据的高性能存储技术研究
    下载Doc文档

    猜你喜欢