• 匿名盲审
  • 学术期刊非营利性
  • 全球免费开放获取全文
  • 最新科研成果提供绿色通道

留言板

尊敬的读者、作者、审稿人, 关于本刊的投稿、审稿、编辑和出版的任何问题, 您可以本页添加留言。我们将尽快给您答复。谢谢您的支持!

姓名
邮箱
手机号码
标题
留言内容
验证码

基于边缘计算的故障录波主站信息快速智能处理方法

巫聪云 刘斌 沈梓正 颜丽 廖晓春

巫聪云,刘斌,沈梓正等.基于边缘计算的故障录波主站信息快速智能处理方法[J].南方能源建设,2021,08(02):91-98. doi:  10.16516/j.gedi.issn2095-8676.2021.02.014
引用本文: 巫聪云,刘斌,沈梓正等.基于边缘计算的故障录波主站信息快速智能处理方法[J].南方能源建设,2021,08(02):91-98. doi:  10.16516/j.gedi.issn2095-8676.2021.02.014
WU Congyun,LIU Bin,SHEN Zizheng,et al.Fast and Intelligent Information Processing Method for Fault Recorder Master Station Based on Edge Computing[J].Southern Energy Construction,2021,08(02):91-98. doi:  10.16516/j.gedi.issn2095-8676.2021.02.014
Citation: WU Congyun,LIU Bin,SHEN Zizheng,et al.Fast and Intelligent Information Processing Method for Fault Recorder Master Station Based on Edge Computing[J].Southern Energy Construction,2021,08(02):91-98. doi:  10.16516/j.gedi.issn2095-8676.2021.02.014

基于边缘计算的故障录波主站信息快速智能处理方法

doi: 10.16516/j.gedi.issn2095-8676.2021.02.014
基金项目: 

中国南方电网有限责任公司科技项目“基于录波源端数据边缘计算的电网故障快速智能诊断技术研究与应用” GXKJXM20200139

详细信息
    作者简介:

    巫聪云1979-,男,广西宾阳人,高级工程师,电气工程硕士,主要从事电力系统继电保护管理工作(e-mail)252644051@qq.com

    刘斌1986-,男,湖北仙桃人,高级工程师,学士,主要从事电力系统继电保护运行维护及专业管理工作(e-mail)279777084@qq.com

    沈梓正1988-,女,黑龙江佳木斯人,高级工程师,硕士,主要从事电力系统继电保护管理工作 (e-mail)1563587491@qq.com

    颜丽(通信作者)1984-,女,湖北武汉人,工程师,物理电子学硕士,主要从事智能电网、继电保护信息集成技术研究工作(e-mail)274237534@qq.com

  • 中图分类号: TM7

Fast and Intelligent Information Processing Method for Fault Recorder Master Station Based on Edge Computing

  • WU Congyun,LIU Bin,SHEN Zizheng,et al.Fast and Intelligent Information Processing Method for Fault Recorder Master Station Based on Edge Computing[J].Southern Energy Construction,2021,08(02):91-98.
  • 摘要:   目的  针对电网调控机构业务集中,故障决策延时和数据传输开销大的问题,设计了一种基于边缘计算的故障录波主站信息快速智能处理方法。  方法  基于故障录波信息处理的边缘计算设计原理和整体框架,利用DataSocket异步并行实时通信和Hadoop分布式存储方案保证数据稳定传输和快速存取,采用改进的SSDA算法快速筛选出故障信息进行分析,电子化报送故障分析结果。  结果  实验结果表明:该方法在海量数据处理、故障快速诊断、辅助决策支持等方面有良好的应用效果,可缓解调控机构信息处理压力和缩短故障决策时延。  结论  结合广西电网运行案例,证明了该方法可靠处理海量故障录波信息的有效性和可行性。
  • 图  1  边缘计算设计原理图

    Fig.  1  Edge computing schematic diagram

    图  2  故障录波信息的边缘计算框架

    Fig.  2  Edge calculation framework of fault recording wave information

    图  3  基于DataSocket的异步并行实时通信网络设计

    Fig.  3  Design of asynchronous parallel real-time communication network based on DataSocket

    图  4  HDFS分布式存储示意图

    Fig.  4  Flow chart of HDFS distributed storage

    图  5  基于改进的SSDA算法的故障录波信息快速智能诊断

    Fig.  5  Fast and intelligent diagnosis for power grid fault based on improved SSDA algorithm

    图  6  Hadoop与Oracle存储方式响应时间的比较

    Fig.  6  Response time comparison of Hadoop and Oracle storage modes

    表  1  Hadoop和Oracle存储数据库配置

    Tab.  1.   Data base configuration of Hadoop and Oracle storage modes

    规格OracleHadoop集群(2.7.7版本)
    操作系统Linux Server release 6.7Linux Server release 6.7
    服务器数量6台6台(2 NameNode+4 DataNode)
    网络带宽100 MB100 MB
    CPU性能八核八核
    CPU主频2.80 GHz2.80 GHz
    内存6×8 GB6×8 GB
    下载: 导出CSV

    表  2  传统和边缘计算架构海量录波数据处理的对比指标

    Tab.  2.   Comparison of edge computing and traditional architectures for processing mass recording wave data

    录波数据量/(GB·min-1传统主站架构基于边缘计算的主站架构
    传输耗时/h存储耗时/min诊断耗时/min宕机/次传输耗时/h存储耗时/min诊断耗时/min宕机/次
    104.1113.123.5602.223.881.170
    507.5630.246.5204.639.561.640
    10013.6950.5315.3316.1516.523.980
    20018.4598.1535.6839.3428.175.120
    下载: 导出CSV
  • [1] 李黎,华奎,姜昀芃,等. 输电线路多源异构数据处理关键技术研究综述 [J]. 广东电力,2018,31(8):124-133.

    LIL,HUAK,JIANGY F,et al. Research review on key technology for multi-source heterogeneous data processing for transmission lines [J]. Guangdong Electric Power,2018,31(8):124-133.
    [2] 张素香,赵丙镇,王风雨,等. 海量数据下的电力负荷短期预测 [J]. 中国电机工程学报,2015,35(1):37-42.

    ZHANGS X,ZHAOB Z,WANGF Y,et al. Short-term power load forecasting based on big data [J]. Proceedings of the CSEE,2015,35(1):37-42.
    [3] 石恒初,游昊,李本瑜,等. 继电保护主站信息融合决策系统的设计与应用 [J]. 电力信息与通信技术,2021,19(1):81-90.

    SHIH C,YOUH,LIB Y,et al. Design and application of information fusion decision system for relay protection main station [J]. Electric Power ICT,2021,19(1):81-90.
    [4] 翟海燕,李本瑜,廖晓春,等. 基于容器调度架构的录波信息主站系统的设计 [J]. 电力信息与通信技术,2018,16(11):40-46.

    ZHAIH Y,LIB Y,LIAOX C,et al. Design of wave recording information master station system based on container scheduling architecture [J]. Electric Power ICT,2018,16(11):40-46.
    [5] 施巍松,张星洲,王一帆,等. 边缘计算:现状与展望 [J]. 计算机研究与发展,2019,56(1):69-89.

    SHIW S,ZHANGX Z,WANGY F,et al. Edge computing:state-of-the-art and future directions [J]. Journal of Computer Research and Development,2019,56(1):69-89.
    [6] 张聪,樊小毅,刘晓腾,等. 边缘计算使能智慧电网 [J]. 大数据,2019,5(2):64-78.

    ZHANGC,FANX Y,LIUX T,et al. Edge computing enabled smart grid [J]. Big Data Research,2019,5(2):64-78.
    [7] 祁兵,夏琰,李彬,等. 基于边缘计算的家庭能源管理系统:架构、关键技术及实现方式 [J]. 电力建设,2018,39(3):33-41.

    QIB,XIAY,LIB,et al. Family energy management system based on edge computing:architecture,key technology and implementation [J]. Electric Power Construction,2018,39(3):33-41.
    [8] 龚钢军,罗安琴,陈志敏,等. 基于边缘计算的主动配电网信息物理系统 [J]. 电网技术,2018,42(10):3128-3135.

    GONGG J,LUOA Q,CHENZ M,et al. Cyber physical system of active distribution network based on container [J]. Power System Technology,2018,42(10):3128-3135.
    [9] 邓云书,李瑞津,叶文华,等. 基于录波数据的广域电能质量评估系统的设计 [J]. 南方能源建设,2019,6(3):113-119.

    DENGY S,LIR J,YEW H,et al. Design of wide area power quality assessment system based on recording data [J]. Southern Energy Construction,2019,6(3):113-119.
    [10] 陈文睿,陈创,廖晓春. 变压器和断路器远程在线监视系统的设计与应用 [J]. 南方能源建设,2018,5(1):132-138.

    CHENW R,CHENC,LIAOX C. Design and application of remote online monitoring system for transformer and circuit breaker [J]. Southern Energy Construction,2018,5(1):132-138.
    [11] 刘志华,吴韬,曹瑞明. 基于DataSocket技术的设备状态监测与故障诊断系统 [J]. 微型机与应用,2015,34(24):84-87.

    LIUZ H,WUT,CAOR M. Equipment condition monitoring and fault diagnosis system based on DataSocket technology [J]. Microcomputer & Its Applications,2015,34(24):84-87.
    [12] 张琳波,李本瑜,翟海燕,等. 基于Hadoop技术的批量录波数据高性能处理方法 [J]. 云南电力技术,2015,43(2):135-138.

    ZHANGL B,LIB Y,ZHAIH Y,et al. Research on high-performance treatment of batch wave recording data based on Hadoop technology [J]. Yunnan Electric Power,2015,43(2):135-138.
    [13] 陈锐忠,魏理豪,梁哲恒,等. 基于Hadoop的海量数据处理模型研究和应用 [J]. 电子设计工程,2016,24(14):101-103+106.

    CHENR Z,WEIL H,LIANGZ H,et al. Research and application of mass data processing model based on Hadoop [J]. Electronic Design Engineering,2016,24(14):101-103+106.
    [14] 陈树峰,姜斌,冒泽慧,等. SSDA波形匹配在高频电源开关控制中的应用 [J]. 电光与控制,2013,20(1):69-73.

    CHENS F,JIANGB,MAOZ H,et al. High-frequency power supply process control based on SSDA waveform matching [J]. Electronics Optics & Control,2013,20(1):69-73.
    [15] 游昊,石恒初,杨远航,等. 基于改进D-S证据理论的电网故障多源信息智能融合诊断方法 [J]. 广东电力,2020,33(11):16-25.

    YOUH,SHIH C,YANGY H,et al. Intelligent fusion diagnosis method for multi-source information of power grid fault based on improved D-S evidence theory [J]. Guangdong Electric Power,2020,33(11):16-25.
  • [1] 王晴勤, 温国标.  基于交能融合的分布式海上风电选址与布置 . 南方能源建设, 2024, 11(2): 59-67. doi: 10.16516/j.ceec.2024.2.06
    [2] 姜绍艳, 李京平, 蔡志平.  智能分布式加电压-时间型双策略就地故障判别方法 . 南方能源建设, 2020, 7(S1): 48-52. doi: 10.16516/j.gedi.issn2095-8676.2020.S1.009
    [3] 唐雷鸣.  分布式电源的最优经济运行方案 . 南方能源建设, 2019, 6(3): 126-131. doi: 10.16516/j.gedi.issn2095-8676.2019.03.021
    [4] 焦丰顺, 任畅翔, 李志铿.  分布式储能项目效益评价方法研究 . 南方能源建设, 2019, 6(3): 48-53. doi: 10.16516/j.gedi.issn2095-8676.2019.03.008
    [5] 黄文诚.  基于无人机巡检的配电网全景管理应用研究 . 南方能源建设, 2019, 6(S1): 58-63. doi: 10.16516/j.gedi.issn2095-8676.2019.S1.012
    [6] 钟景亮.  分布式能源站去工业化设计浅析——以江门分布式能源站为例 . 南方能源建设, 2018, 5(S1): 37-41. doi: 10.16516/j.gedi.issn2095-8676.2018.S1.007
    [7] 翟永杰, 李冰, 乔弘, 葛建宏, 于萍.  分布式风电物联网平台设计与工程实践 . 南方能源建设, 2017, 4(3): 23-29. doi: 10.16516/j.gedi.issn2095-8676.2017.03.005
    [8] 华贲.  分布式供能系统建模优化能流逻辑思维图详解 . 南方能源建设, 2017, 4(2): 17-23. doi: 10.16516/j.gedi.issn2095-8676.2017.02.002
    [9] 黄挺.  广州大学城分布式能源站供冷系统选型设计 . 南方能源建设, 2017, 4(4): 34-36. doi: 10.16516/j.gedi.issn2095-8676.2017.04.007
    [10] 华贲.  分布式供能系统协同电网调峰是历史的必然 . 南方能源建设, 2016, 3(4): 8-12. doi: 10.16516/j.gedi.issn2095-8676.2016.04.002
    [11] 陆伟宏, 葛乃成, 聂宇本, 贲树俊, 庄立伟.  分布式光伏电源接入电网安全管理实践与研究 . 南方能源建设, 2016, 3(S1): 186-189. doi: 10.16516/j.gedi.issn2095-8676.2016.S1.042
    [12] 郝晓辉, 刘鑫屏.  直冷式空冷机组燃料BTU实时校正方法研究 . 南方能源建设, 2016, 3(4): 32-36. doi: 10.16516/j.gedi.issn2095-8676.2016.04.007
    [13] 胡泊, 王爽.  区域分布式能源网优化运行与多边交易研究 . 南方能源建设, 2015, 2(2): 9-14. doi: 10.16516/j.gedi.issn2095-8676.2015.02.002
    [14] 刘利平, 陈泽韩, 王路, 丁一, 刘泽鑫.  天然气分布式电源的用户运行分析和发展环境研究 . 南方能源建设, 2015, 2(2): 57-61. doi: 10.16516/j.gedi.issn2095-8676.2015.02.010
    [15] 史正军, 刘苏, 朱浩骏, 邓婧, 李俊杰.  分布式储能设备在广东省的应用分析 . 南方能源建设, 2015, 2(2): 80-85. doi: 10.16516/j.gedi.issn2095-8676.2015.02.015
    [16] 刘利平, 郭文骏, 刘泽鑫.  南方五省区分布式电源对电网的影响分析 . 南方能源建设, 2015, 2(1): 11-16. doi: 10.16516/j.gedi.issn2095-8676.2015.01.002
    [17] 黄镜欢, 施海云.  分布式能源站燃气内燃机的余热利用方式探讨 . 南方能源建设, 2015, 2(2): 66-69. doi: 10.16516/j.gedi.issn2095-8676.2015.02.012
    [18] 王雅娟, 高会生.  一种电力通信传输网可靠性指数计算方法 . 南方能源建设, 2015, 2(2): 111-114. doi: 10.16516/j.gedi.issn2095-8676.2015.02.021
    [19] 辛文成, 沈彦君, 苏成, 殷勤.  含分布式电源的配电网重构 . 南方能源建设, 2015, 2(2): 46-51. doi: 10.16516/j.gedi.issn2095-8676.2015.02.008
    [20] 李利, 卓越.  基于通信传输网链路不对称算法改进 . 南方能源建设, 2014, 1(1): 62-65. doi: 10.16516/j.gedi.issn2095-8676.2014.01.011
  • 加载中
图(6) / 表 (2)
计量
  • 文章访问数:  397
  • HTML全文浏览量:  113
  • PDF下载量:  36
  • 被引次数: 0
出版历程
  • 收稿日期:  2020-12-17
  • 修回日期:  2021-02-01
  • 刊出日期:  2021-06-25

基于边缘计算的故障录波主站信息快速智能处理方法

doi: 10.16516/j.gedi.issn2095-8676.2021.02.014
    基金项目:

    中国南方电网有限责任公司科技项目“基于录波源端数据边缘计算的电网故障快速智能诊断技术研究与应用” GXKJXM20200139

    作者简介: 巫聪云1979-,男,广西宾阳人,高级工程师,电气工程硕士,主要从事电力系统继电保护管理工作(e-mail)252644051@qq.com

    刘斌1986-,男,湖北仙桃人,高级工程师,学士,主要从事电力系统继电保护运行维护及专业管理工作(e-mail)279777084@qq.com

    沈梓正1988-,女,黑龙江佳木斯人,高级工程师,硕士,主要从事电力系统继电保护管理工作 (e-mail)1563587491@qq.com

    颜丽(通信作者)1984-,女,湖北武汉人,工程师,物理电子学硕士,主要从事智能电网、继电保护信息集成技术研究工作(e-mail)274237534@qq.com

  • 中图分类号: TM7

摘要:   目的  针对电网调控机构业务集中,故障决策延时和数据传输开销大的问题,设计了一种基于边缘计算的故障录波主站信息快速智能处理方法。  方法  基于故障录波信息处理的边缘计算设计原理和整体框架,利用DataSocket异步并行实时通信和Hadoop分布式存储方案保证数据稳定传输和快速存取,采用改进的SSDA算法快速筛选出故障信息进行分析,电子化报送故障分析结果。  结果  实验结果表明:该方法在海量数据处理、故障快速诊断、辅助决策支持等方面有良好的应用效果,可缓解调控机构信息处理压力和缩短故障决策时延。  结论  结合广西电网运行案例,证明了该方法可靠处理海量故障录波信息的有效性和可行性。

English Abstract

巫聪云,刘斌,沈梓正等.基于边缘计算的故障录波主站信息快速智能处理方法[J].南方能源建设,2021,08(02):91-98. doi:  10.16516/j.gedi.issn2095-8676.2021.02.014
引用本文: 巫聪云,刘斌,沈梓正等.基于边缘计算的故障录波主站信息快速智能处理方法[J].南方能源建设,2021,08(02):91-98. doi:  10.16516/j.gedi.issn2095-8676.2021.02.014
WU Congyun,LIU Bin,SHEN Zizheng,et al.Fast and Intelligent Information Processing Method for Fault Recorder Master Station Based on Edge Computing[J].Southern Energy Construction,2021,08(02):91-98. doi:  10.16516/j.gedi.issn2095-8676.2021.02.014
Citation: WU Congyun,LIU Bin,SHEN Zizheng,et al.Fast and Intelligent Information Processing Method for Fault Recorder Master Station Based on Edge Computing[J].Southern Energy Construction,2021,08(02):91-98. doi:  10.16516/j.gedi.issn2095-8676.2021.02.014
  • 目前电力系统处于大力发展以“控大智移”为目标的阶段1,具备继电保护设备信息集成能力的各种系统,注重中心化,将各种数据、信息和资源归集至调控机构,造成传输网络开销大和信息处理延迟的问题,无法满足电网快速发展业务形态的需求2

    随着电网规模的持续扩张,录波装置作为基础配套设备,其数量快速增加,录波数据呈爆发式增长,海量录波数据的快速处理成为亟待解决的问题。分析录波数据,发现其存在以下特点:(1)价值密度低:故障数据占比仅为2%;(2)海量骤发性:故障发生时,多个录波装置监测点集中产生海量数据并同时上送,瞬间冲击主站通信、存储和计算资源,考验主站服务器的承载能力;(3)多源异构:异种录波装置产生格式各异的数据,在数据传输过程中出现信息丢失、上传失败等问题3-4。对海量、异构、骤发录波数据稳定传输、快速存储、提炼出2%故障数据高效诊断的研究,具有极大的价值。

    近年来,边缘计算的出现,可减轻云计算中心的负荷,减少网络链路数据传输压力,降低实时性数据处理时延。为了缓解信息中心调控机构的压力,可利用录波主站对海量数据进行预处理,筛选出故障信息进行分析,电子化报送故障报告,支持调控机构直接决策,将调控人员从繁琐的信息处理工作中解放出来5-8

    本文通过研究调控机构在电网事故实际处理过程中存在的问题,结合边缘计算对数据高效处理的特点,提出一种基于边缘计算的故障录波主站信息快速智能处理方法,将大量的故障诊断任务下放到录波主站系统进行处理,满足海量录波数据场景的实时处理需求,提高电网故障的诊断效率。

    • 传统故障信息处理模式为调控机构进行故障信息的集中式管理,但调控机构处理信息压力大、人工干预程度高、故障决策延迟问题频发,在故障信息的实时处理方面已呈现局限性。

      基于边缘计算的录波信息快速智能处理模式设计原理如图1所示,录波主站作为调控机构边缘的故障信息处理系统,不再局限于信息传递,而是具备扰动数据筛选、故障数据高效诊断和信息快速发布的能力,对厂站侧上送的扰动数据,快速进行数据分析和故障诊断工作,直接将故障信息的分析报告电子化报送至调控机构,可实时处理海量录波数据,极大程度缓解调控机构信息处理压力和缩短故障决策时延。

      图  1  边缘计算设计原理图

      Figure 1.  Edge computing schematic diagram

    • 故障录波信息的边缘计算框架如图2所示,从设备、网络、数据和应用四域,利用异步通信、分布式存储和故障快速诊断等技术,实现对海量录波数据的并行处理,提供芯片级的诊断服务并电子化报送故障结果,提高录波主站系统的综合处理能力,降低实时性数据的处理时延,全面促进电网故障录波信息处理模型的持续优化生长。

      图  2  故障录波信息的边缘计算框架

      Figure 2.  Edge calculation framework of fault recording wave information

      1)设备域

      设备状态:主要涉及安装在厂站侧的所有录波装置,负责监视电力系统一次设备的正常运行,当线路发生扰动或故障时,正常启动并记录模拟量和开关量的变化情况。

      源端信息:将采集到的故障电压、电流信号经过隔离、变送、A/D转换后,形成COMTRADE格式连续的数据量,按照通道配置和时标转换成故障波形,清晰再现整个故障过程。

      2)网络域

      海量数据传输:录波主站提供通信接口,与调度数据网建立网络连接,采用实时通信方式,提高海量录波数据的通信效率。

      网络风暴抑制:通信网络服务器故障、网卡损坏、网络环路等原因造成的网络风暴,配置风暴抑制特性进行预防,避免网络丢包、响应迟缓、时断时通、瘫痪等问题的发生,提高网络性能。

      信息安防:录波主站具有网络通信和数据处理能力,将录波数据进行过滤和处理后传输,可有效保护敏感数据不被上传到网络中,保证数据的安全及隐私。

      3)数据域

      海量数据存储:利用分布式的存储方式,扩展录波主站海量数据的存储性能,提高资源利用效率,达到各存储节点资源的动态平衡。

      数据融合与快速诊断:建立录波数据的独立分析诊断机制,主站系统对同故障多来源的录波数据深入挖掘,结合获取到的开关量,进行故障信息融合和快速诊断,生成录波故障报告。

      事故复盘:保留所有电网相关业务数据,包含原始数据和故障报告、设备运行有效日志等信息,在检索线路故障、设备故障及历史回溯等场景时进行信息调取和查看,对电网事故复盘,避免同类问题再次发生。

      4)应用域

      报告发布与直接决策:录波主站系统将生成的故障报告通过电子化报送方式推至Web、云平台和移动终端,实现便捷式故障信息查看,支撑调控机构直接决策。

      策略机制管控:设计基于边缘计算的录波故障信息处理策略和共享管控机制,在保证安全性的同时,优化信息处理机制,提高信息共享的范围和深度,面向调度、检修和运行等人员实现电网故障信息利用价值的最大化9-10

    • 设计故障录波信息快速处理的边缘计算框架,其目的就是从设备、网络、数据和应用四域对录波数据进行智能监控、高效处理和有效利用,降低数据传输网络开销。现阶段重点工作是如何解决录波数据实时通信传输稳定、数据存储和调取便捷以及故障信息快速挖掘和诊断的问题,这是基于边缘计算的电网故障录波信息快速处理方法研究中的关键。

    • 录波主站系统通信端口与厂站侧录波装置之间通过调度数据网进行大量的通信工作。主站系统自有规约库,可根据当前主流厂商规约的特性,将非标规约自适应转换成电力系统自动化领域唯一的全球通用标准IEC 61850,对异种录波装置具有极高的兼容性。然而传统主站服务器局域网TCP/IP通信方式因编程的复杂性,存在网络链路不稳定导致数据传输失败的问题,无法满足在高频通信情况下数据实时传输的需求。

      基于DataSocket的异步并行实时通信网络设计如图3所示,DataSocket通信方式能够有效地将厂站侧录波装置采集到的大量数据转化为适合于主站通信网络传输的信号,DataSocket包含DataSocket API和DataSocket Server,前者提供独立的编程接口,适应不同编程环境下多种数据类型的通读,后者通过封装底层TCP/IP协议进行统一管理来控制数据的发送和接收,简化了网络通信方式,且数据传输准确可靠。

      图  3  基于DataSocket的异步并行实时通信网络设计

      Figure 3.  Design of asynchronous parallel real-time communication network based on DataSocket

      基于DataSocket的分布式实时通信网络,充分利用DataSocket API提供的传输信道资源,不受限于数据格式的差异和网络间通信协议的不同,利用异步并行方式将通信开销时间进行量化,合理分配每条传输信道的通信时间,为实时性要求高、传输性能要求可靠的录波主站系统的数据通信和集成提供便利,将通信开销维持在最小范围内,有效解决录波主站在海量骤发录波数据传输中通信开销大的问题11

    • Master/Slave架构的HDFS(Hadoop Distributed File System)系统可用于分布式数据存储,一个名字节点(NameNode)和多个数据节点(DataNode)组成一个HDFS集群,分别负责分配文件存储位置和存储实际数据。

      HDFS系统通过NameNode High Availability机制可启动两个Namenode,一个处于active状态,负责所有的客户端操作,另外一个处于standby状态,负责维护数据状态,具备随时切换的条件,其作用是降低Namenode并发访问时单点失败的风险,形成彼此协同的处理模式。

      HDFS分布式存储示意如图4所示,系统中数据存储不受单一节点磁盘大小的限制,可将录波文件分散存储到集群的各个节点,而且采用副本存放与读取策略,备份文件分布于不同的DataNode,具有较高的容错性。

      图  4  HDFS分布式存储示意图

      Figure 4.  Flow chart of HDFS distributed storage

      相较于传统Oracle数据库的存储仅集中于一台物理服务器节点,磁盘写入时间随存储数据量的不断增加呈线性快速增长而言,HDFS分布式存储优势整理如下:

      1)HDFS节点管理性能:存储着HDFS文件系统目录树和录波数据操作日志的fsimage和edits大小直接影响NameNode的启动速度,Active NameNode通过HTTP从 Standby NameNode获取最新的fsimage文件命名为fsimage.ckpt_txid,并生成MD5文件,与Standby NameNode的MD5值比对校验,在确认收到的fsimage文件正确后将其重命名为fsimage_txid,并清理掉旧的fsimage和edits文件,以此确保Standby和Active 2个NameNode都拥有最新的fsimage和edits文件,从而增强2个节点协同管理的性能。

      2)信息存储的安全性:对所有录波数据复制相同的3个副本,通过机架感知的策略,将一个副本存放在本地机架的节点上,一个副本放在同一机架的另一个节点上,最后一个副本放在不同机架的节点上,3个副本有序分开保存于不同的存储节点,在提高写操作效率的同时,也保证了数据的安全性。

      3)信息调用的可靠性:DataNode的存储设备错误、网络错误或者软件bug可能造成从某个DataNode获取的数据块是损坏的,在调用数据时,可对文件的内容进行checksum检查,通过checksum一致性匹配,确认是否为目标调用数据,如果不一致,可选择从其他DataNode获取该数据块的副本,减少损坏数据误用的发生,提高信息调用的可靠性。

      4)信息存储的利用率:HDFS系统文件切分后分散存储至不同的DataNode,满足流式访问数据读取需求,响应不同任务请求,按录波启动时间进行数据有序存储,提高存储数据的使用频率12-13

      存储数据库分为静态和动态两部分,静态数据库保存电网拓扑结构、录波装置规格和属性等信息,一次写入可供多次读取,后期维护量小;动态数据库用来记录故障录波波形的变化,数据存储量大,采用基于Hadoop的录波信息分布式存储方法,可以快速保存、检索和调用启动时间序列相似的录波数据。

    • 1)智能容错:读取录波文件,查验文件中装置ID、线路名称、模拟量和状态量通道采样信息、线路两侧的CT/PT变比等不可或缺的信息是否齐全。若信息不全或出现乱码,调取含有错误类型相对应的补偿信息列表,予以信息补充或更正。对录波文件中经常发生的数据缺失、异常或不识别等问题进行智能容错处理。

      2)无损转换:不同厂商、不同型号录波装置采集的故障文件格式各异,通过录波文件查询对应的录波装置型号,获取对应的文件格式转换接口表,解析文件格式并读取文件数据,最终将不同格式的录波文件转换成标准的COMTRADE格式的数据文件。将不同采样率的波形通过拉格朗日插值法进行采样率归一化处理,便于后续对录波波形快速诊断。

    • 故障录波数据可靠,但信息量大,需要从海量录波数据中提炼出2%的故障信息,传统队列式串行分析不利于故障信息的快速识别。

      波形在某种程度上可以视为特定的图形,只需要提取疑似故障段波形,将故障波形匹配问题转换为直观的图像匹配问题进行简化。序贯相似度检测匹配法(Sequential Similarity Detection Algorithms,SSDA)最主要的特点是图像匹配处理速度快。

      基于改进的SSDA算法的故障录波信息快速智能诊断详细流程如图5所示,关键步骤介绍如下:

      图  5  基于改进的SSDA算法的故障录波信息快速智能诊断

      Figure 5.  Fast and intelligent diagnosis for power grid fault based on improved SSDA algorithm

      1)建立故障波形库,记录常见电网故障(单相接地、两相短路、两相接地、三相短路)波形特征信息。

      2)并行计算目标波形和故障库波形之间的绝对误差:λ(i,j)=Sm(i,j)-T(i,j)

      式中:Sm(i,j)是故障波形库中第m个波形中的点;T(i,j)为目标匹配波形中的点。

      3)将故障库波形当作模板,计算波形库中波形模板与目标待匹配波形点的绝对误差,并将每一点的误差累计,计算残差和,作为初始阈值Tk

      4)阈值选取对于算法的精度有较大影响,若阈值较大,运算速度较慢;阈值过小,匹配精度会降低,故采用改进后的自适应阈值进行阈值更新。将故障库波形模板不断移动,记下一个匹配区域的残差和为Tk+1,如果Tk+1Tk,则搜索完成;如果Tk+1<Tk,则用Tk+1来更新Tk,并记录该区域起始点位置坐标,当目标波形搜索完成,则可得目标匹配波形的最佳匹配结果,记录累加次数rm

      5)并行计算故障库中波形和目标波形的匹配集合{r1,r2,...,rm},最终的匹配结果n=max{r1,r2,...,rm},即使得阈值最小且累加次数最多的波形即为最终的故障匹配结果。

      对于大部分非匹配点来说,只需计算波形中的前几个点即可算出残差和超过阈值,波形不具有故障特征。只有匹配点附近的点才需要扩宽计算,这样平均起来每一点的运算次数将远远小于实测波形的点数,从而达到减少整个波形匹配过程计算量的目的14

      采用SSDA算法并行匹配故障库常见故障波形,可以满足90%常见故障快速诊断的需求。对于剩余10%特殊故障或复杂故障无法快速识别的情况,可以利用与其他主站交互的信息进行交叉验证或采用D-S证据理论进一步融合诊断故障15

    • 为了验证DataSocket实时数据通信传输的稳定性,在实验室局域网利用5台录波装置、2台PC组建数据采集(发布端)、DataSocket server和测控应用(接收端)3部分,采用南瑞NEP4A-E1 2 M通道复用装置模拟调度数据网2 M专线进行录波数据传输,为增强系统的安全性,可以在计算机之间用防火墙隔离。

      利用IEEE 39节点系统Simulink软件对高压输电线路进行仿真,利用5台录波装置监测仿真产生的故障信号,采集到的5 000个实时数据通过2 M通信通道传输方式发送到DataSocket server,不同类型的数据写入不同路径,接收端从相应的路径中取出数据,实现分布式数据的实时通信和监控。通过客户端监控显示,通过2 M通信通道传输的数据发包率和接收成功率均为100%,表明利用DataSocket异步并行方式可实现通信数据稳定传输。

      基于Hadoop集群和Oracle数据库两种存储方式,在存储硬件配置基本一致的前提下,进行录波数目量级递增情况下数据读写响应时间的对比实验,两种存储数据库的硬件环境如表1所示。

      表 1  Hadoop和Oracle存储数据库配置

      Table 1.  Data base configuration of Hadoop and Oracle storage modes

      规格OracleHadoop集群(2.7.7版本)
      操作系统Linux Server release 6.7Linux Server release 6.7
      服务器数量6台6台(2 NameNode+4 DataNode)
      网络带宽100 MB100 MB
      CPU性能八核八核
      CPU主频2.80 GHz2.80 GHz
      内存6×8 GB6×8 GB

      以广西电网历史库中录波数据作为研究对象,选取100、1 000、10 000、20 000、40 000、60 000、80 000、100 000个大小为0.5~5 MB录波文件,分别采用传统Oracle与文中所提分布式Hadoop集群两种方式进行数据存储实验,最终取3次存储响应时间的平均值,记录结果如图6所示。

      图  6  Hadoop与Oracle存储方式响应时间的比较

      Figure 6.  Response time comparison of Hadoop and Oracle storage modes

      图6可以看出,当文件数量较少时,Oracle存储效率比较高,原因是Hadoop集群存储方式涉及到节点的选取,系统自身开销导致存储响应耗时较长,随着存储数据量的逐步增加,在超过临界点10 000个以后,Oracle存储方式响应时间快速增长,而Hadoop通过内部节点协同和分配处理机制,使得数据写入和读取所需时间显著缩短,在海量录波数据的存储效率方面显示出了绝对性的优势。

      录波数据实时传输和分布式存储都是服务于录波数据快速诊断,基于改进的SSDA算法进行波形匹配,阈值Tk的选取非常关键,本文采用自适应阈值方法,初始阈值Tk设定在0.4附近,避免搜索过早结束,匹配过程中不断自适应修正阈值,将目标波形与故障库波形模板进行快速匹配,较少的时间就可以完成海量录波数据诊断工作,挖掘出2%故障信息中的常见故障。相较于传统方法故障特征量提取和精细分析来说,基于改进的SSDA算法更适合于价值密度仅2%的故障录波数据快速分析,可以提高故障诊断效率。表2整理了传统和边缘计算两种架构的海量录波数据处理的指标对比数据。

      表 2  传统和边缘计算架构海量录波数据处理的对比指标

      Table 2.  Comparison of edge computing and traditional architectures for processing mass recording wave data

      录波数据量/(GB·min-1传统主站架构基于边缘计算的主站架构
      传输耗时/h存储耗时/min诊断耗时/min宕机/次传输耗时/h存储耗时/min诊断耗时/min宕机/次
      104.1113.123.5602.223.881.170
      507.5630.246.5204.639.561.640
      10013.6950.5315.3316.1516.523.980
      20018.4598.1535.6839.3428.175.120

      表2可以看出:

      1)录波数据量级递增,导致传统架构主站性能大幅度衰减,当录波数据冲击量达到100 GB/min时,已接近传统主站系统的性能极限,但基于边缘计算架构的主站系统可继续维持系统稳定。

      2)数据存储和诊断耗时受存储方式和诊断算法的影响较大,分布式存储和并行诊断方法的应用可以大幅度缩减用时,但数据传输速率受网络带宽限制,虽然采取DataSocket实时通信方式,传输速率有所提升,但在海量数据骤增的情况下,网络开销仍相对较大,是主站系统故障分析耗时的瓶颈。

    • 基于边缘计算的故障录波主站信息快速智能处理方法,利用DataSocket异步并行实时通信方式进行数据稳定上送;采用Hadoop分布式存储保证各个存储节点的动态平衡,便于数据的快速写入和调取;利用改进的SSDA算法快速筛选故障数据,常见故障可以高效匹配判定,电子化报送故障报告支持调控机构直接决策。实验证明,该方法在数据稳定传输、高效存取和故障快速诊断方面有良好的应用效果,缓解了调控机构信息处理的压力,解决了数据传输开销大和故障决策延时的问题。

      由于网络通信数据传输是录波主站故障快速诊断中的瓶颈,受网络带宽影响较大,后续将从源端录波数据处理着手,进一步优化厂站侧海量录波数据的传输策略,提高录波数据实时通信效率。

  • 巫聪云,刘斌,沈梓正等.基于边缘计算的故障录波主站信息快速智能处理方法[J].南方能源建设,2021,08(02):91-98.
  • 参考文献 (15)

    目录

      /

      返回文章
      返回