面向海洋气象的数据汇聚平台

面向海洋气象的数据汇聚平台

论文摘要

海洋气象数据标准各异、来源广泛、结构多样,将这些质量参差不齐的数据加以规范利用具有深远的实际意义。本文以现有海洋气象水文数据管理系统为主要数据源,结合开源爬虫技术定向获取气象水文信息,支持了结构化、半结构化和非结构化数据之间在线和离线格式转换,建立了标准统一、存储便捷、业务广泛的数据汇聚平台,并对数据采集、融合治理、汇聚存储及运维监控等数据汇聚全生命周期进行了设计实现,具有一定的理论意义和实际应用价值。

论文目录

  • 引言
  • 1 研究现状及相关工作
  • 2 技术介绍
  •   2.1 数据融合技术
  •   2.2 开源爬虫技术
  • 3 系统设计
  •   3.1 总体设计
  •   3.2 详细设计
  •     1.数据整合模块
  •     2.离线文件上传
  •     3.网络数据采集
  •     4.数据汇聚存储
  •     5.运维监控
  • 4 系统实现
  •   4.1 数据抽取实现
  •   4.2 页面开发实现
  • 5 结束语
  • 文章来源

    类型: 期刊论文

    作者: 谢志敏,宋爽,张彤彤,李翀

    关键词: 海洋气象,海洋大数据,数据治理,数据汇聚

    来源: 科研信息化技术与应用 2019年02期

    年度: 2019

    分类: 信息科技,基础科学

    专业: 气象学,海洋学,计算机软件及计算机应用

    单位: 军事科学院,中国科学院计算机网络信息中心

    分类号: TP311.13;P732

    页码: 42-50

    总页数: 9

    文件大小: 1963K

    下载量: 98

    相关论文文献

    • [1].科学数据汇聚的模式分析及对我国的发展建议[J]. 地球科学进展 2020(08)
    • [2].高校数据汇聚框架设计研究[J]. 数码世界 2018(02)
    • [3].智慧城市时空大数据汇聚系统关键技术研究[J]. 测绘与空间地理信息 2019(09)
    • [4].集中办公环境下多节点协作数据汇聚系统的设计与实现[J]. 中国新通信 2018(14)
    • [5].大数据汇聚关键技术与统一架构研究[J]. 电信技术 2015(01)
    • [6].市级政务数据汇聚共享平台的设计与应用[J]. 福建电脑 2018(05)
    • [7].工信部发布《关于工业大数据发展的指导意见》 推动工业大数据高质量发展[J]. 中国设备工程 2020(11)
    • [8].政策速递[J]. 信息化建设 2020(05)
    • [9].基于ZigBee技术的数据汇聚终端设计及应用[J]. 物联网技术 2014(11)
    • [10].基于数据汇聚功能的高速通用接口卡设计[J]. 核电子学与探测技术 2019(04)
    • [11].基于开源的数据汇聚与可视化技术研究[J]. 电脑知识与技术 2019(10)
    • [12].无线传感器网络中的分簇安全数据汇聚方案[J]. 计算机工程 2019(09)
    • [13].一种用于工业无线传感器网络的数据汇聚机制[J]. 合肥工业大学学报(自然科学版) 2018(04)
    • [14].基于源的VTS数据汇聚管理模式[J]. 中国新通信 2019(15)
    • [15].“灾害风险调查和重点隐患排查工程”大数据汇聚路径探索——以黑龙江省为例[J]. 中国信息化 2019(11)
    • [16].学生成长数据汇聚标准体系的概述及应用[J]. 教育传播与技术 2020(02)
    • [17].基于多路由传输的无线传感器网络安全数据汇聚机制[J]. 兵工自动化 2012(09)
    • [18].对北京市政务大数据建设与发展的建议[J]. 中国工程咨询 2019(08)
    • [19].大数据汇聚平台在交通卡口应用的分析与设计[J]. 通讯世界 2019(06)
    • [20].基于SOAP协议的智慧校园大数据汇聚研究[J]. 科技与创新 2017(04)
    • [21].无线传感器网络山洪监测数据汇聚平台[J]. 自动化技术与应用 2013(06)
    • [22].基于G-Means的中医药可穿戴设备的数据汇聚方法研究[J]. 世界科学技术-中医药现代化 2020(06)
    • [23].一种新的无线传感器网络数据汇聚方法[J]. 兵工自动化 2010(10)
    • [24].基于区域划分的WSN数据汇聚路由算法[J]. 合肥工业大学学报(自然科学版) 2012(12)
    • [25].基于嵌入式数据库的分布式大坝监测数据汇聚器设计[J]. 电子技术应用 2011(05)
    • [26].浅谈当前“智慧公安”建设中数据方面存在的问题及对策[J]. 中国信息化 2019(10)
    • [27].基于物联网的农林小气候监测系统数据汇聚平台[J]. 农业科技与装备 2012(11)
    • [28].无线传感器网络数据汇聚协议CTP的仿真与研究[J]. 现代电子技术 2011(06)
    • [29].基于延时树分割汇聚机制的WSN数据汇聚算法[J]. 重庆科技学院学报(自然科学版) 2020(04)
    • [30].基于图着色的TDMA调度方法性能仿真分析[J]. 软件导刊 2014(09)

    标签:;  ;  ;  ;  

    面向海洋气象的数据汇聚平台
    下载Doc文档

    猜你喜欢