基于血缘图模型的气象数据监控研究与实现
黄伟, 阮惠华, 乔文文, 黄宇宸, 陈逸智
广东省气象数据中心,广州 510630
Research and implementation of meteorological data monitoring based on lineage model
Huang Wei, Ruan Huihua, Qiao Wenwen, Huang Yuchen, Chen Yizhi
Guangdong Meteorological Data Center,Guangzhou 510630
摘要 气象数据种类繁多且流程复杂,为了保证数据的及时性和完整性,快速定位数据流程故障十分重要。文章以气象数据及流程为研究对象,提出了一种血缘图模型,用于描述气象数据的来源与去向;基于血缘图模型提出了一种多频红黑树算法,用于管理监控任务。在广东省气象网的数据监控中,运用血缘图模型与红黑树算法,开发了一套血缘图监控系统,旨在为数据管理人员提供帮助,提高数据异常告警及时性及故障定位及时性。
关键词 :
气象数据 ,
血缘图 ,
多频红黑树
Abstract :There are various types of meteorological data and complex processes.In order to ensure the timeliness and completeness of the data,it is very important to quickly locate data flow faults.The article takes meteorological data and processes as the research object,and proposes lineage model to describe the source and destination of meteorological data.A multi-frequency red black tree algorithm based on the lineage model is proposed for managing monitoring tasks.In the data monitoring of Guangdong Provincial Meteorological Network,a blood relationship graph model and red-black tree algorithm were used to develop a lineage model monitoring system,aiming to provide assistance to data management personnel and improved the timeliness of data anomaly alarms and fault location.
Key words :
meteorological data
lineage model
multi-frequency red-black tree
收稿日期: 2023-03-10
基金资助: 广东省气象局省级课题“业务网数据监控技术研究”(2018)资助。
作者简介 : 黄伟(1989—),男,硕士,工程师。主要从事软件开发工作。
引用本文:
黄伟, 阮惠华, 乔文文, 黄宇宸, 陈逸智. 基于血缘图模型的气象数据监控研究与实现[J]. 气象水文海洋仪器, 2024, 41(6): 20-23.
Huang Wei, Ruan Huihua, Qiao Wenwen, Huang Yuchen, Chen Yizhi. Research and implementation of meteorological data monitoring based on lineage model. Meteorological Hydrological and Marine Instrument, 2024, 41(6): 20-23.
链接本文:
http://www.qxswhy.com/CN/ 或 http://www.qxswhy.com/CN/Y2024/V41/I6/20
[1]
鲍婷婷,陈鹏,殷笑茹.省级气象资料监控业务系统设计与实现[J].气象水文海洋仪器,2014,31(3):104-106.
[2]
杨皓然.基于Petri网的业务流程建模优化与一致性分析[D].淮南:安徽理工大学,2020.
[3]
舒美智.一种有效的系统软件故障定位方法[J].工业控制计算机,2021,34(5):85-86.
[4]
胡伟,熊雄,魏敏丹,等.气象数据业务监视系统与资料传输质量分析[J].气象水文海洋仪器,2023,40(1):32-33,37.
[5]
闫荞荞,刘莹,刘园园,等.省级气象资料归档管理系统设计与实现[J].气象水文海洋仪器,2017,34(1):50-53.
[6]
陈琬.企业档案数据全流程管理分析[J].兰台内外,2021(15):37-38.
[7]
尤勇,汪浩,任天,等.一种监控系统的链路跟踪型日志数据的存储设计[J].软件学报,2021,32(5):1302-1321.
[8]
陈敏.浅析三层架构的组成及优势[J].信息通信,2020(1):147-148.
[9]
董爱强,王莹,闫丹,等.HTML5技术的流程管理平台的升级改造[J].电子世界,2021(6):31-32.
[10]
程伟.应用层组播可靠性和稳定性研究[D].武汉:武汉大学,2010.
[1]
刘心洁, 邓磊, 周瑜. 基于C#的气象数据备份系统 [J]. 气象水文海洋仪器, 2024, 41(1): 108-110.
[2]
赵勇, 王瑜. 基于气象大数据的雨量智能分级控制系统设计 [J]. 气象水文海洋仪器, 2023, 40(4): 112-114.
[3]
许博, 孙桂玉, 褚春燕, 秦晚宸, 于秀健. 气象数据文件自动管理软件设计 [J]. 气象水文海洋仪器, 2022, 39(1): 104-105.
[4]
徐娟, 刘洋, 许竹霞, 钟斌斌. Linux Shell在同城用户服务中的应用 [J]. 气象水文海洋仪器, 2022, 39(1): 109-111.
[5]
唐凤, 朱君. 基于CIMISS的国家级自动气象站故障报警系统设计 [J]. 气象水文海洋仪器, 2021, 38(3): 99-100.
[6]
周其永, 袁柱. 昆明国际机场气象数据无线传输设计 [J]. 气象水文海洋仪器, 2021, 38(3): 107-108.
[7]
畅巨峥, 崔粉娥. 基于WebService接口的秦皇岛气象数据查询和服务系统 [J]. 气象水文海洋仪器, 2019, 36(4): 65-68.
[8]
张悦, 孙悦程, 王洪祥, 周丽丽. 大连气象百年历史资料综合查询平台的设计与实现 [J]. 气象水文海洋仪器, 2019, 36(4): 56-60.
[9]
王洪祥, 周丽丽, 王会品, 刘卫华. 大连市气象业务监控平台的设计与实现 [J]. 气象水文海洋仪器, 2019, 36(2): 77-81.
[10]
许皓皓, 胡利军. 市级气象数据中心容灾体系设计 [J]. 气象水文海洋仪器, 2018, 35(3): 75-79.
[11]
李新庆,卫建国,王凡,陈增境. 基于PostgreSQL的气象业务数据存储应用研究 [J]. 气象水文海洋仪器, 2017, 34(4): 13-17.
[12]
陈增境,陈玉华,徐青,岳勇,李新庆. 北斗通信在宁夏气象数据传输中的应用 [J]. 气象水文海洋仪器, 2017, 34(2): 38-39.
[13]
李永超,周丽丽,夏薇,张悦. VMWare服务器虚拟化技术在气象业务系统中的网络重构 [J]. 气象水文海洋仪器, 2016, 33(3): 83-85.
[14]
米永胜. IBM Websphere MQ原理及在民航气象数据库中的应用 [J]. 气象水文海洋仪器, 2014, 31(4): 63-67.
[15]
李占睿. 民航气象二期数据库系统管理、维护和二次开发 [J]. 气象水文海洋仪器, 2011, 28(1): 93-095.