海量实时数据服务平台

海量实施数据服务平台海量实时时数据服服务平台台目 录1.总则则42.规范范性引用用文件443.术语语和定义义44.技术术要求775.附则则356.附录录1通用规规约3557.附录录2 IIEC1104规约约约定5518.附录录3 EE语言格格式5339.通用用应用编编程接口（UAAPI）53前 言为规范海海量实时时数据服服务平台台技术标标准和要要求，指指导XXXXX公公司海量量实时数数据服务务平台建建设、改改造和运运行管理理工作，根根据国家家和行业业有关标标准、规规程和规规范，制制定本规规范。本规范由由中国XXXXXX公司有有限责任任公司标标准化委委员会批批准。本规范由由中国XXXXXX公司有有限责任任公司信信息部提提出、归归口管理理和负责责解释。本规范起起草单位位： 本规范参参加单位位：本规范主主要起草草人：海量实时时数据平平台技术术规范1. 规范性引引用文件件下列文件件中的条条款通过过本部分分的引用用而成为为本规范范的条款款。凡是是注日期期的引用用文件，其其随后所所有的修修改单（不不包括勘勘误的内内容）或或修订版版均不适适用于本本规范，凡凡是不注注日期的的引用文文件，其其最新版版本适用用于本规规范。ISO/IECCTR1133335:220000 信息息技术安安全技术术IT安安全管理理指南 GB/TT202270 网络络基础安安全技术术要求 2. 术语和定定义本文档在在描述过过程中涉涉及相关关术语、编编写语等等，为使使读者方方便了解解相关术术语意义义，有助助于该规规范的描描述，此此处对相相关术语语做统一一的说明明。2.1 应用程序序接口AAPIAPI (Apppliicattionn Prrogrram Intterffacee)应应用程序序接口，由由可执行行应用组组件提供供而供给给其他应应用组件件使用的的公用函函数集。2.2 公共信息息模型 CIMM公共信息息模型(Commmonn Innforrmattionn Moodell，CIIM )是一个个抽象模模型，它它提供一一种标准准化方法法，把各各种资源源描绘为为对象类类、属性性、行为为以及它它们之间间的关系系，它是是一种可可扩展的的数据模模型，用用于在管管理环境境中以一一致和统统一的方方式在逻逻辑上组组织管理理对象。2.3 组件接口口规范CCIS组件接口口规范(Commponnentt Innterrfacce SSpeccifiicattionn，CIIS) 是在CCIM基基础上定定义的，规定组组件（或或应用程程序）为为了能够够以一种种标准方方式和其其它的组组件（或或应用程程序）交交换信息息和/或或访问公公开数据据而应该该实现的的各种接接口。当前CIIS标准准规定了了DAFF（数据据访问设设施）、GDA（通用数据访问接口）、HSDA（高速数据访问接口）、TSDA（时序数据访问接口）中的所有接口服务，包括近100个方法。2.4 通用数据据访问GGDAGDA (Geenerric Datta AAcceess)通用数数据访问问，包含含了用于于访问基基于CIIM层次次信息结结构的公公共数据据的APPI服务务。换句句话说是是，客户户可以访访问由另另一个组组件（应应用或数数据库）维维护的数数据，或或者一个个系统所所维护的的数据，不不需要了了解此系系统用于于内部数数据存储储的逻辑辑模式，CCIM的的知识已已经足够够。2.5 可缩放矢矢量图形形SVGGSVG (Sccalaablee Veectoor GGrapphiccs)可缩放放矢量图图形，是是由W33C组织织推出的的最新一一代矢量量图形标标准，是是一种开开放标准准的文本本式图形形描述语语言。2.6 WebSServviceeWeb Serrvicce 是是一种新新的weeb应用用程序分分支，它它们是自自包含、自自描述、模模块化的的应用，可可以发布布、定位位、通过过webb调用。WWeb Serrvicce是一一个应用用组件，它逻辑辑性的为为其他应应用程序序提供数数据与服服务。各应用用程序通通过网络络协议和和规定的的一些标标准数据据格式（HHttpp，XMML，SSoapp)来访访问Weeb SServvicee,通过过Webb Seerviice内内部执行行得到所所需结果果。Webb Seerviice可可以执行行从简单单的请求求到复杂杂商务处处理的任任何功能能。一旦旦部署以以后，其其他Weeb SServvicee应用程程序可以以发现并并调用它它部署的的服务。2.7 XML可可扩展标标记语言言XML（Exttenssiblle MMarkkup Lannguaage）即即可扩展展标记语语言，它它与HTTML一一样，都都是SGGML(Staandaard Genneraalizzed Marrkupp Laanguuagee,标准准通用标标记语言言)。Xmll是Intternnet环环境中跨跨平台的的，依赖赖于内容容的技术术，是当当前处理理结构化化文档信信息的有有力工具具。扩展展标记语语言XMML是一一种简单单的数据据存储语语言，使使用一系系列简单单的标记记描述数数据，而而这些标标记可以以用方便便的方式式建立，虽虽然XMML占用用的空间间比二进进制数据据要占用用更多的的空间，但但XMLL极其简简单易于于掌握和和使用。2.8 XML SchhemaaXML Schhemaa语言也也被称为为XMLL Scchemma DDefiinittionn (XXSD)（XMLL Scchemma定义义）。XXML Schhemaa是以XMML语言言为基础础的，它它用于可可替代DDTD。一一份XMML sscheema文文件描述述了XMML文档档的结构构。2.9 简单对象象访问协协议SOOAPSOAPP（Simmplee Obbjecct AAcceess Prootoccol）简简单对象象访问协协议，简简单对象象访问协协议（SSOAPP）是一一种轻量量的、简简单的、基基于 XXML 的协议议，它被被设计成成在 WWEB 上交换换结构化化的和固固化的信信息。 SOAAP 可可以和现现存的许许多因特特网协议议和格式式结合使使用，包包括超文文本传输输协议（ HTTP），简单邮件传输协议（SMTP），多用途网际邮件扩充协议（MIME）。它还支持从消息系统到远程过程调用（RPC）等大量的应用程序。2.10 XSLTT扩展样样式表转转换语言言XSLTT是扩展展样式表表转换语语言（EExteensiiblee Sttyleesheeet Lannguaage Traansfformmatiionss）的简简称，这这是一种种对XMML文档档进行转转化的语语言，XXSLTT中的T代表英英语中的的“转换”（traansfformmatiion）。2.11 服务在SOAA架构中中，服务务是最核核心的抽抽象手段段，它具具有明确确的功能能，通常常封装着着业务功功能或者者数据。一一个服务务包括接接口（IInteerfaace）、契契约（CConttracct）和和实现（Implementation）三个部分。服务的接口和契约采用中立、基于标准的方式进行定义，它独立于实现服务的硬件平台、操作系统和编程语言，这使得构建在不同系统中的服务可以以一种统一的和通用的方式进行交互。2.12 企业服务务总线企业服务务总线(Entterpprisse SServvicee Buus) ，以下下简称EESB,是一种种在松散散耦合的的服务和和应用之之间标准准的集成成方式，提提供简单单、快速速、基于于标准的的多点集集成，类类似硬件件中的总总线结构构。2.13 WS-SSecuurittyWS-SSecuuritty 定定义了一一个用于于携带安安全性相相关数据据的 SSOAPP 标头头元素。如如果使用用 XMML 签签名，此此标头可可以包含含由 XXML 签名定定义的信信息，其其中包括括消息的的签名方方法、使使用的密密钥以及及得出的的签名值值。2.14 WSDLLWSDLL(Weeb SServvicees DDesccripptioon LLangguagge)：WSDDL即WWeb服服务描述述语言，它它从句法法层面对对Webb服务的的功能进进行描述述，包括括4个不不同的粒粒度：数数据类型型(DaataTTypee)、消消息(MMesssagee)、方方法(OOperratiion)和访问问端口(PorrtTyype)。WSSDL只只提供了了Webb服务的的接口描描述，对对服务的的行为约约束和属属性描述述缺乏进进一步的的支持。2.15 E语言XX系统统数据标标记语言言EE语言规规范（以以下简称称“E语语言”）是是在IEEC 6619770-3301XX系统公用数据模型CIM（Common Information Model）的面向对象抽象基础上，针对CIM在以XML方式进行描述时的效率缺陷所制定的一种新型高效的XX系统数据标记语言。2.16 104规规约国际电工工委员会会制定的的IECC608875-5-1104规规范，最新的的版本是是20000版。用于适应和引导XX系统调度自动化的发展，规范调度自动化及远动设备的技术性能。我国电力行业在2002年发布了DL 634.5104-2002协议，而且注明是和IEC60870-5-104（2000）是等同采用。本规范中提到的104规约是IEC60870-5-104（2000）。3. 技术要求求3.1 功能规范范海量实时时数据平平台的功功能架构构主要包包括数据据接入、数数据处理理、数据据加工、数数据存储储、元数数据管理理、访问问服务、支支撑工具具以及平平台管理理八大部部分。如如下图所所示：图3功能能架构3.1.1 元数据管管理海量实时时数据平平台元数数据管理理功能主主要包括括：测点点管理、电电网模型型数据管管理、量量测管理理功能。3.1.1.1 测点管理理测点管理理功能主主要负责责测点的的增加、删删除、修修改、查查询以及及导入/导出，具具体说明明如下：1）增加加测点：支持增增加单个个或批量量测点的的功能，增增加测点点时输入入测点的的属性，并并根据规规则检查查测点属属性的完完整性和和合法性性；2）删除除测点：支持删删除单个个或批量量测点的的功能；3）修改改测点：支持修修改单个个或批量量测点的的属性的的功能，修修改测点点时也要要检查测测点属性性的完整整性和合合法性；4）查询询测点：支持单单个参数数的条件件查询以以及多个个参数组组成的组组合条件件查询；5）导入入测点：支持以以固定格格式（XXML，CCSV等等）批量量导入测测点功能能，导入入时根据据规则配配置检查查测点属属性的完完整性和和合法性性；6）导出出测点：支持以以固定格格式（XXML，CCSV等等）导出出测点功功能。测点属性性主要包包括：测测点名称称、类型型、数据据精度、刷刷新频度度、变换换方式、限限值、测测点来源源等。测测点属性性的完整整性检查查主要是是检查必必填属性性是否为为空等。测测点属性性的合法法性检查查包括：格式、字字符长度度、逻辑辑关系等等方面的的检查。3.1.1.2 电网模型型数据管管理海量实时时数据平平台遵循循ECIIM和IIEC6619770/6619668标准准，提供供统一规规范的设设备模型型视图。海海量实时时数据平平台管理理的电网网模型数数据包括括：发电电设备、输输电设备、配配电设备备、变电电设备、表表计信息息、用户户及拓扑扑模型等等数据。主要功能能包括：1）提供供符合CCIM规规范的电电网模型型视图。模模型层次次包括组组织、控控制区域域、电压压等级、设设备容器器、设备备以及设设备的量量测，形形成一个个完整的的树状的的电网模模型视图图；2）支持持从企业业数据仓仓库导入入电网模模型数据据，包括括全部导导入和增增量导入入，导入入时自动动检查模模型数据据的完整整性，并并实现模模型的拼拼接。3.1.1.3 量测管理理量测是建建立测点点与电网网设备的的测量关关系。通通过量测测管理，提提供符合合ECIIM标准准的数据据视图，为为企业级级应用开开发提供供支撑。海量实时数据平台量测管理应该遵循广东电网公司实时数据量测编码规范，并对来自不同业务系统的量测进行编码映射，实现量测编码统一。主要功能能包括：1）增加加量测：增加测测点或者者增加电电网模型型设备时时自动匹匹配生成成量测；2）删除除量测：删除测测点或者者删除电电网模型型设备时时自动删删除关联联的量测测；3）修改改量测：支持量量测属性性的修改改，通过过修改关关联测点点或者关关联设备备参数改改变测点点与设备备的关联联关系；4）查询询：支持持通过设设备查找找量测，也也可以通通过测点点查询量量测；支支持查询询某个设设备关联联的所有有测点以以及某个个测点所所属的设设备；量测属性性主要包包括：量量测名称称、类型型、关联联测点、关关联设备备等；3.1.2 数据接入入海量实时时数据平平台提供供规范的的数据接接入功能能，将各各业务系系统实时时数据接接入到海海量实时时数据平平台。3.1.2.1 接入规约约海量实时时数据平平台应支支持统一一的数据据通信协议议，以规规范不同同业务系系统的数数据接入入，为方方便现有有业务系系统的接接入，应应支持通通信协议议的扩展展。海量量实时数数据平台台应至少少支持以下下的通信信协议：1）通用用规约：通用规规约是海海量实时时数据平平台为实实现各业业务系统统实时数数据的高高效、统统一接入入而制定定的通信信报文传传输格式式。具体体规约定定义参见见附录11。2）1004规约约：电力力通信标标准规约约，具体体定义参参见附录录2。3）E语语言：遵遵循IEEC6119700/6119700规范的的XX系系统数据据标记语语言，具具体参见见附录33。3.1.2.2 接入的业业务系统统海量实时时数据平平台接入入的各业业务系统统及接入入规约选选择如下下表所示示：表1：海海量实时时数据平平台接入入业务系系统业务系统统数据量接入频率率通信规约约XXXXX公司总总部SCADDA/EEMS业务系统统全部实实时数据据3秒通用规约约，IEEC1004，EE语言。计量自动动化业务系统统全部实实时数据据15分钟钟通用规约约省公司SCADDA/EEMS业务系统统全部实实时数据据3秒通用规约约，IEEC1004，EE语言。计量自动动化业务系统统全部实实时数据据15分钟钟通用规约约设备远程程监测系系统设备监测测业务系统统全部实实时数据据3秒通用规约约覆冰监测测业务系统统全部实实时数据据15分钟钟通用规约约变压器绝绝缘油监监测业务系统统全部实实时数据据日通用规约约变压器中中性点直直流分量量监测业务系统统全部实实时数据据3秒通用规约约雷电定位位系统业务系统统全部实实时数据据有雷击时时自动上上送通用规约约电能质量量检测业务系统统全部实实时数据据3秒通用规约约地市局SCADDA/EEMS业务系统统全部实实时数据据3秒通用规约约，IEEC1004，EE语言。DMS业务系统统全部实实时数据据15分钟钟通用规约约，IEEC1004，EE语言。计量自动动化业务系统统全部实实时数据据15分钟钟通用规约约注1：海海量实时时数据平平台接入入个业务务系统全全部实时时数据。注2：接接入频率率是各业业务系统统数据处处理和刷刷新的频频率。随随着智能能电网建建设，特特别是配配电自动动化建设设的深入入，DMMS系统统采集的的数据频频率将更更高，海海量实时时数据平平台应该该能支持持最高的的接入频频率。注3：与与各业务务系统通通信规约约推荐采采用通用用规约，海海量实时时数据平平台应该该支持1104规规约和EE语言格格式以及及与业务务系统协协商的其其它规约约。3.1.2.3 接入配置置管理海量实时时数据平平台从各各业务系系统接入入实时数数据，这这些业务务系统是是海量实实时数据据平台的的数据源源。接入入配置管管理主要要负责海海量实时时数据平平台与各各数据源源系统间间的通信信参数的的统一管管理。主主要功能能包括：数据源源系统的的增加、删删除、修修改、查查询等功功能：1）增加加：支持持增加数数据源系系统的功功能，增增加时设设置与数数据源系系统通信信的参数数；2）删除除：支持持删除数数据源系系统的功功能；3）修改改：支持持修改数数据源系系统配置置参数的的功能；4）查询询：支持持查询数数据源系系统功能能。数据源系系统配置置参数主主要包括括：通信信协议、通通信方式式、端口口地址等。3.1.2.4 接入处理理接入处理理是指：根据接接入配置置，通过过指定的的通信协议议和通信信方式与与数据源源业务系系统进行行通信，接接收源业业务系统统的实时时数据，并并把接收收到的数数据转换换为海量量内部数数据格式式。接入处理理功能主主要包括括：1）根据据配置，与与各源业业务系统统建立通通信链路路；2）按照照通信协议议，与源源业务系系统进行行通信，接接收实时时数据；3）对接接入的数数据进行行格式转转换。4）在数数据接入入过程中中，对于于配置参参数的修修改应该该能自动动适应，不不应该由由于通信信参数的的变更而而重新启启动接入入进程。3.1.2.5 接入监控控管理海量实时时数据平平台提供供接入监监控功能能，实现现数据接接入的可可视和可可控。主主要功能能包括：1）提供供界面以以方便实实时监视视链路的的连接状状态、数数据流量量、连通通时刻、数数据包信信息等；2）提供供界面以以方便进进行连接接状态、运运行时间间、停运运时间、数数据流量量等的统统计和查查询；3）提供供界面以以方便对对通讯链链路进行行运行、停停止等控控制操作作；4）接入入源业务务系统、网网络通道道等状态态异常时时提供报报警功能能。3.1.2.6 接入异常常处理接入异常常处理是是为解决决与源业业务系统统在接入入过程中中由于异异常情况况（如果果网络中中断等）而而导致数数据丢失失的问题题，并对对异常情情况提供供统计分分析功能能为平台台系统运运营维护护提供参参考。接入异常常处理功功能主要要包括：1）对于于接入源源业务系系统运行行异常情情况，在在异常情情况恢复复后，提提供补录录机制，保保证数据据不丢失失；2）提供供接入异异常信息息的查询询、统计计等功能能。 查询内容容包括：发生时时间、原原因等； 统计功能能包括：异常发发生频率率统计等等。3.1.3 数据处理理海量实时时数据平平台应该该对采集集到的各各类数据据进行过过滤、转换等规规范化处处理并对对数据的的质量进进行检查查分析。数据处处理功能能主要包括括：数据据过滤、数数据变换换、数据据质量处处理等。3.1.3.1 数据过滤滤数据过滤滤功能主主要包括括：模拟拟量过滤滤处理和和状态量量过滤处处理。1）模拟拟量过滤滤处理判断模拟拟量数据据是否在在合理值值范围内内，如果果超出合合理值范范围，则则根据配配置进行行过滤处处理并产产生告警警。2）状态态量过滤滤处理进行状态态量变化化检测，有有几种情情况： 收到的数数据值与与之前的的一致，自自动过滤滤新收到到的数据据。 根据配置置规则断断定是状状态抖动动，则进进行防抖抖处理，处处理方式式包括：丢弃和和报警。 对于正常常的状态态量变化化，产生生告警。3.1.3.2 数据变换换数据变换换功能主主要包括括：模拟拟量变换换和状态态量变换换。1）模拟拟量变换换为了方便便其他应应用使用用数据，根根据配置置规则，进进行模拟拟量变换换处理。如如：量程程转换或或者单位位转换。2）状态态变换由于信号号采集设设备或者者源业务务系统原原因，可可能导致致状态量量的值与与实际相相反。海海量实时时数据平平台提供供状态变变换处理理功能，根根据配置置对状态态量进行行变换处处理。3.1.3.3 数据质量量处理数据质量量处理主主要目的的是保证证海量实实时数据据平台的的数据在在被其他他应用使使用时的的真实性性和可理理解性，保保证数据据能够与与实际对对应并被被数据使使用者理理解。海海量实时时数据平平台数据据质量处处理包括括以下几几个方面面：1）数据据质量标标识，海量实实时数据据平台提提供统一一的数据据质量规规范和转转换规则则，如下下表所示示：表2数据据质量规规范数据类型型数据质量量描述模拟量Goodd（好）实时数据据平台如如果没有有检测出出通道异异常且外外系统提提供的数数据质量量标志为为“goood”，则存存入平台台的数值值被标记记为“goood”Quesstioonabble（可可疑）如果实时时数据平平台监测测出采集集通道没没有异常常，但长长期没有有接收到到数据或或者该数数据源的的原数据据质量为为“queestiionaablee”，则数数值将被被标记为为“queestiionaablee”，由客客户端来来决定是是否使用用被标记记为“queestiionaablee”的数据据Invaalidd（无效）如果实时时数据平平台发现现采集通通道异常常或者采采集通道道正常，但但该数据据源的原原数据质质量为“invvaliid”，数值值将被标标记为“invvaliid”。此标标记用来来提示客客户端此此数值可可能是不不正确的的，不应应被使用用OverrHigghLiimitt（越上上限）实时数据据平台如如果没有有检测出出通道异异常且外外系统提提供的数数据质量量标记为为越上限限、越上上上限，则实实时数据据平台的的数值标标记为越越上限OverrLowwLimmit（越越下限）实时数据据平台如如果没有有检测出出通道异异常且外外系统提提供的数数据质量量标记为为越下限限，越下下下限，则实实时数据据平台的的数值标标记为越越下限ManRRepllaceed（人人工置数数）实时数据据平台如如果没有有检测出出通道异异常且外外系统提提供的数数据质量量标记为为人工置置数，则则实时数数据平台台的数值值标记为为人工置置数状态量Goodd（好）实时数据据平台如如果没有有检测出出通道异异常且外外系统提提供的数数据质量量标志为为“goood”，则存存入平台台的数值值被标记记为“goood”Quesstioonabble（可可疑）如果实时时数据平平台监测测出采集集通道没没有异常常，但长长期没有有接收到到数据或或者该数数据源的的原数据据质量为为“queestiionaablee”，则数数值将被被标记为为“queestiionaablee”，由客客户端来来决定是是否使用用被标记记为“queestiionaablee”的数据据Invaalidd（无效效）如果实时时数据平平台发现现采集通通道异常常或者采采集通道道正常，但但该数据据源的原原数据质质量为“invvaliid”，数值值将被标标记为“invvaliid”。此标标记用来来提示客客户端此此数值可可能是不不正确的的，不应应被使用用TrippAcccideent（事事故跳闸闸）实时数据据平台如如果没有有检测出出通道异异常且外外系统提提供的数数据质量量标记为为事故跳跳闸，则则实时数数据平台台的数值值标记为为事故跳跳闸ManRRepllaceed（人人工置数数）实时数据据平台如如果没有有检测出出通道异异常且外外系统提提供的数数据质量量标记为为人工置置数，则则实时数数据平台台的数值值标记为为人工置置数电度量Goodd（好）实时数据据平台如如果没有有检测出出通道异异常且外外系统提提供的数数据质量量标志为为“goood”，则存存入平台台的数值值被标记记为“goood”Quesstioonabble（可可疑）如果实时时数据平平台监测测出采集集通道没没有异常常，但长长期没有有接收到到数据或或者该数数据源的的原数据据质量为为“queestiionaablee”，则数数值将被被标记为为“queestiionaablee”，由客客户端来来决定是是否使用用被标记记为“queestiionaablee”的数据据Invaalidd（无效效）如果实时时数据平平台发现现采集通通道异常常或者采采集通道道正常，但但该数据据源的原原数据质质量为“invvaliid”，数值值将被标标记为“invvaliid”。此标标记用来来提示客客户端此此数值可可能是不不正确的的，不应应被使用用ManRRepllaceed（人人工置数数）实时数据据平台如如果没有有检测出出通道异异常且外外系统提提供的数数据质量量标记为为人工置置数，则则实时数数据平台台的数值值标记为为人工置置数计算量Goodd（好）实时数据据平台如如果没有有检测出出通道异异常且计计算量的的各原始始值的数数据质量量标志都都为“goood”，则存存入平台台的计算算量被标标记为“goood”Invaalidd（无效效）如果实时时数据平平台发现现采集通通道异常常或者采采集通道道正常，但但该数据据源的原原数据质质量为“invvaliid”，数值值将被标标记为“invvaliid”。此标标记用来来提示客客户端此此数值可可能是不不正确的的，不应应被使用用CompponeentAAbnoormaal（分分量异常常）实时数据据平台如如果没有有检测出出通道异异常且计计算量的的各原始始值的数数据质量量标志不不都为“goood”，则存存入平台台的计算算量被标标记为分分量异常常。对于于分量异异常的计计算点使使用者可可以根据据提示查查看具体体是哪个个原始点点的数据据质量有有问题实时数据据管理平平台在没没有检测测到数据据通道异异常的情情况下，外外系统数数据质量量除了“goood”、“Queestiionaablee”、“越上限限”、“越上上上限”、“越下限限”、“越下下下限”、“人工置置数”、“事故跳跳闸”七种情情况外，其其他的数数据质量量在实时时数据管管理平台台可以转转换为“goood”，也可可以根据据实际应应用进行行相应转转换。数据质量量采用44字节的的整数来来进行管管理，并并且规定定了系统统定义的的数据质质量以及及自定义义的数据据质量。系系统定义义的数据据质量采采用高66位定义义了上述述七种数数据质量量，其余余的留给给应用系系统自定定义使用用。按照照不同数数据质量量的聚类类分组，其其中，“Goood”、“Queestiionaablee”、“Invvaliid”作为一一组，使使用2位位表示；“OveerHiighLLimiit”、“OveerLoowLiimitt”作为一一组，采采用2位位表示；“TriipAccciddentt”作为一一组，采采用1位位表示；“MannRepplacced”作为一一组，采采用1位位表示。数数据质量量定义如如下所示示。Goodd=0xx8000000000HQuesstioonabble=0x22000000000HInvaalidd=0xx1000000000HOverrHigghLiimitt=0xx0800000000HOverrLowwLimmit=0x00400000000HTrippAcccideent=0x00200000000HManRRepllaceed=00x01100000000H2）支持持多种数数据质量量检查及及处理方方式，如如下表所所示：表3数据据质量处处理方式式检查类型型说明处理方法法数据完整整性检查查数据完整整性检查查主要判判断是否否有丢失失数据的的情况。应该支持持一下几几种完整整性处理理方法：1）通知知数据接接入模块块进行数数据补录录；2）采用用相应的的计算算算法进行行数据补补齐。3）对于于通过计计算补齐齐的数据据，修改改质量标标识，置置为计算算。数据有效效性检查查根据数据据的有效效范围，突突变范围围等属性性，判断断数据的的有效性性。对于无效效数据，修修改质量量标识，置置为无效效。数据实时时性检查查检查数据据是否超超过配置置的时间间限制没没有更新新。对于超过过配置时时限没有有更新的的数据，修修改质量量标识，置置为可疑疑。数据真实实性检查查根据配置置规则，进进行电网网运行状状态辨识识，发现现可疑的的数据。对于可疑疑数据，修修改质量量标识，置置为可疑疑。数据越限限检查根据测点点限值配配置判断断实时数数据是否否越限，并并确定越越限的级级别。对于越限限数据，设设置越限限标识；恢复到到正常状状态时清清除越限限标识。3.1.4 数据加工工数据加工工是根据据具体需需求基于于现有的的实时数数据进行行计算、统统计等生生成更加加有价值值的信息息，供其其它业务务应用和和分析辅辅助决策策类应用用使用，数据加加工包括括计算引引擎、计计算规则则库管理理、统计计服务三三部分的的内容。3.1.4.1 计算引擎擎计算引擎擎通过时时间、优优先级等等配置策策略，执执行对应应的计算算算法，生生成计算算结果，并并作为测测点的结结果值和和状态转转存到数数据库中中。海量实时时数据平平台计算算引擎应应该支持持分布式式计算功功能。部部署在一一个服务务器上的的计算引引擎作为为一个计计算节点点，多个个计算节节点协同同工作组组成计算算集群，正常情情况下，各各计算节节点分别别承担部部分计算算任务，实实现负载载均衡，当某一一个节点点故障后后，其它它节点自自动分担担计算任任务。主要功能能包括：1）支持持多种计计算类型型：周期期计算、分分量变化化时触发发计算、定定时计算算、人工工启动计计算；2）计算算引擎包包括：变变量类型型定义、变变量作用用域、运运算符结结合律和和优先级级、语法法、流程程控制、系系统函数数、自定定义函数数、宿主主程序的的接口等等内容；3）计算算引擎的的处理过过程包括括：编辑辑、语法法错误检检查、伪伪编译、执执行等；4）脚本本编辑：提供脚脚本编写写工具，采采用IDDE的方方式，支支持语法法颜色敏敏感。5）公式式计算异异常处理理。对于于公式计计算过程程中出现现计算错错误的处处理，采采用默认认值的方方式进行行设定，当当公式计计算错误误后，如如果设定定默认值值，则获获取默认认值，如如果没有有默认值值，则写写入异常常。3.1.4.2 计算规则则库管理理计算规则则库管理理负责对对计算测测点的计计算规则则进行管管理。主要功能能包括：1）提供供方便、友友好的界界面供用用户离线线或者在在线定义义计算量量和计算算公式；2）支持持常用的的函数计计算库，支支持加、减减、乘、除除、三角角、对数数等运算算，也可可进行逻逻辑和条条件判断断运算。3）支持持的数据据类型、运运算符、标标准函数数和语句句如下： 支持海量量实时数数据平台台统一的的数据类类型定义义，如下下表所示示：表4数据据类型类型编号号类型名称称类型描述述1无符号ccharr型1字节无无符号数数2无符号短短整型2字节无无符号数数3短整型2字节有有符号数数4无符号长长整型4字节无无符号数数5长整型4字节有有符号数数6浮点型4字节浮浮点型7字符串以/0结结尾的字字符串 支持的运运算符o 算术运算算符：包包括+、-（减）、-（负号号）、*、/、%（整除除） ；o 逻辑运算算符：&、|、 ！ ；o 关系运算算符：、=、=、!=、=、；o 其他运算算符： （)；o 选择运算算符：？ 。 支持的标标准函数数o 指数、对对数函数数：包括括expp，loog，llog110，ppow，ssqrtt；o 三角运算算和反三三角运算算：包括括sinn、coos、ttg、cctg、aarcssin、aarcccos、aarcttg、aarccctg；o 绝对值函函数abbs、ffabss；o 字符串函函数 sstrccmp、sstrccpy、sstrccat、sstrllen；o 积分函数数、求平平均值函函数。 支持的语语句o 表达式语语句；o 循环语句句：doo.whiile、ffor、wwhille等；o 条件判断断语句：if、sswittch.caase等等；o 控制执行行顺序的的语句：breeak语语句和cconttinuue语句句。4）提供供公式编编辑模板板，支持持自定义义函数，提提供常用用的专业业计算公公式计算算库： 负载率计计算 总加计算算 变压器档档位计算算 负荷超欠欠值计算算 功率因数数计算 母线功率率、电量量平衡率率计算 用户可自自定义的的其他计计算功能能5）支持持调用海海量实时时数据平平台统一一的UAAPI接接口函数数。3.1.4.3 统计服务务数据统计计功能的的主要作作用是：根据配配置，获获取所需需要的数数据，进进行统计计计算，并并将结果果保存在在实时数数据库或或者关系系数据库库中。数数据统计计的周期期包括：年、月月、周、日日、小时时以及自自定义的的任意时时间段，如如峰、谷谷、平时时段以及及节假日日等。数据统计计服务包包括模拟拟量统计计和状态态量统计计。1）模拟拟量统计计 平均值、最最大、最最小值以以及最大大值时刻刻、最小小值时刻刻统计； 越限次数数统计，以以及累计计越限次次数统计计； 越限时长长统计，累累计越限限时长统统计； 合格率统统计； 累计值统统计。2）状态态量统计计 开关等设设备变位位次数统统计； 开关等设设备合/分闸持持续时间间自动进进行统计计。3.1.5 数据存储储海量实时时数据平平台需要要存储的的数据包包括：从从各业务务系统接接入的实实时/准准实时数数据，SSOE数数据、报报警事件件数据以以及配置置数据，模模型数据据、图形形数据等等。数据存储储功能主主要包括括：支持持多种存存储方式式、数据据压缩处处理、数数据转存存与备份份。3.1.5.1 支持多种种存储方方式海量实时时数据平平台采用用实时数数据库和和关系数数据库以以及文件件相结合合的方式式实现数数据的存存储。1）实时时数据库库压缩存存储由于实时时数据库库产品相相对于关关系型数数据库具具有读写写性能高高、空间间占用率率低的优优势，实实时、准准实时数数据采用用实时数数据库进进行压缩缩存储；2）关系系数据库库存储 报警事件件以及SSOE记记录等，存存储到关关系库中中； 雷电监测测数据，储储存到关关系库或或者特定定格式文文件中； CIM模模型数据据以及图图形数据据存储到到关系数数据库中中； 实时数据据平台的的平台管管理配置置信息，存存储在关关系型数数据库中中。3）文件件格式存存储实时数据据平台支支持文件件格式存存储，按按照不同同文件格格式或应应用类型型，以目目录形式式保存在在磁盘上上。3.1.5.2 数据压缩缩处理数据压缩缩处理主主要是针针对实时时数据库库存储，以以减少磁磁盘存储储空间。实实时数据据库提供供两种压压缩算法法：有损损压缩和和无损压压缩。有损压缩缩是根据据实时数数据的特特征，在在不影响响整体精精度和性性能指标标的情况况下，而而采取的的一些特特殊的舍舍点算法法；无损损压缩一一般以通通用压缩缩理论为为基础，采采取哈夫夫曼算法法等经典典的压缩缩算法。无无损压缩缩算法的的压缩率率比有损损压缩的的算法要要低很多多。实时数据据库产品品本身带带有压缩缩算法。针针对测点点精度的的需要，可可设定采采用无损损压缩或或者有损损压缩，并并设定压压缩精度度。电量量数据、用用电信息息采集等等数据以以及累计计值数据据不进行行有损压压缩处理理。3.1.5.3 数据转存存与备份份海量实时时数据平平台历史史数据管管理主要要包括历历史数据据的备份份、转存存等工作作。由于于数据库库产品以以及应用用容量限限制，历历史数据据不可能能无限制制存储。通通过配置置存储策策略，对对过期的的数据进进行转存存等操作作，实现现数据循循环存储储，避免免由于存存储满而而导致新新的实时时数据无无法存储储而丢失失或者系系统故障障。历史史数据的的备份和和维护操操作可以以定期自自动执行行，也可可以手动动执行。3.1.6 数据访问问海量实时时数据平平台提供供遵循EECIMM标准以以及IEEC6119700/6119688标准的的数据访访问服务务，支持持CISS、UAAPI、WWebsservvicee等接口口规范。主要功能能包括：数据查查询和订订阅服务务以及访问问服务监监控等。3.1.6.1 查询服务务海量实时时数据平平台对外外提供实实时/历历史数据据的查询询功能，内内容包括括：1）实时时数据查查询：当当前实际际测点以以及派生生虚拟测测点的断断面实时时数据查查询；2）历史史数据查查询：实实际测点点及派生生虚拟测测点的历历史数据据查询，包包括：单单数据历历史数据据查询、支支持指定定间隔历历史数据据查询、支支持拟合合数据（插插值）查查询、支支持断面面历史数数据查询询。3）历史史统计数数据：各各遥测数数据的最最大值、最最小值、平平均值，以以及最大大最小发发生时间间统计；开关刀刀闸以及及其他遥遥信信号号量的历历史统计计查询；4）报警警事件及及SOEE记录查查询：提提供对报报警事件件记录以以及SOOE记录录的分类类检索和和查询统统计。3.1.6.2 订阅服务务海量实时时数据平平台对外外提供数数据订阅阅服务，根根据应用用订阅要要求，按按约定的的频率、方方式、地地点、传传送约定定的数据据。海量量实时数数据平台台支持以以下订阅阅方式： 1）实时时数据订订阅：最最新数据据变化时时发送到到订阅方方;2）事件件信息订订阅：当当有最新新事件信信息时，发发送到订订阅方；3）历史史时间段段内数据据订阅：对订阅阅方提供供的起止止时间，按按时间节节奏发送送数据到到订阅方方；2）历史史时间段段内事件件数据订订阅：对对订阅方方提供的的起止时时间，按按时间节节奏发送送事件信信息到订订阅方。3.1.6.3 访问监控控海量实时时数据平平台提供供数据监监控功能能，主要要包括：访问服服务监控控和访问问异常处处理。1）访问问服务监监视：对对访问实实时数据据平台的的客户端端数量、数数据流量量、访问问测点规规模等信信息的监监视与查查询浏览览功能；对不同同访问方方式下用用户数量量及数据据流量的的监视统统计功能能；2）访问问异常处处理：对对于外部部数据统统计查询询导致异异常情况况提供告告警信息息，并可可限制或或停止具具体客户户端的访访问服务务。3.1.7 平台管理理平台管理理为海量量实时数数据平台台的基础础功能，对对整个平平台系统统进行管管理，主主要包括括：配置置管理、权权限管理理、资源源监视、日日志管理理、备份份和恢复复等功能能。3.1.7.1 配置管理理配置管理理主要负负责海量量实时数数据平台台中服务务器、应应用组件件等的增增、删、改改、查等等。配置置参数包包括：服务器配配置参数数包括：接入服服务器、数数据库服服务器、应应用服务务器等服服务器的的IP地地址、名名称等参参数。应用组件件配置参参数包括括：海量量实时数数据平台台应用程程序模块块运行需需要的配配置，如如数据库库连接串串等。3.1.7.2 权限管理理海量实时时数据平平台权限限管理遵遵循XXXXX公公司信息息安全防防护管理理规范，通过省公公司权限限管理平平台进行行统一权权限验证证，用户户权限主主要包括括：访问问权限、编编辑权限限等。用用户权限限由系统统管理员员（SAA）进行行维护，用用户登录录成功后后，根据据自身拥拥有权限限可进行行相应的的操作。3.1.7.3 资源监视视海量实时时数据平平台资源源监视功功能主要要包括：包括操操作系统统资源和和平台运运行状态态监视。1）操作作系统监监视：主要监视视内容包包括： CPU、内内存、交交换区的的使用率率、空闲闲率； 磁盘IOO、网络络IO的的繁忙情情况： 关键进程程、宕机机进程、消消耗CPPU最多多的进程程等； 通过以上上内容的的监控，及及时消除除潜在的的隐患或或故障，保保证操作作系统和和海量实实时数据据平台的的高可用用性。2）平台台运行监监视 测点分布布监视：实时/历史数数据库服服务器现现有测点点规模、分分布、以以及剩余余容量的的监视。当当剩余容容量低于于设置的的限值时时，提供供报警功功能； 服务器通通讯监视视：实时时/历史史数据库库服务器器的实际际物理地地址、通通道、端端口状态态监视； 通讯异常常告警：当数据据库、服服务器或或者通讯讯状态等等出现异异常情况况时提供供报警功功能； 数据库启启动、停停止监视视：监视视数据库库启动、停停止状态态，状态态发生变变化时提提供报警警功能； 检查磁盘盘存储空空间使用用情况：根据数数据平台台历史存存档文件件生成速速度和磁磁盘使用用情况，估估算磁盘盘能够存存放的历历史数据据时间跨跨度，若若发现磁磁盘剩余余空间不不足，提提供报警警功能。3.1.7.4 日志管理理日志管理理功能主主要是帮帮助平台台运维人人员更好好的管理理和维护护平台，日日志可以以分为系系统运行行日志，操操作日志志等。系统统运行日日志主要要是系统统各模块块运行时时根据配配置自动动产生的的记录信信息，操操作日志志是用户户通过界界面进行行操作的的记录，包包括配置置参数修修改、数数据增、删删、改、查查、导入入、导出出，节点点主备切切换等。日志管理理功能应应包括日日志查询询、删除除以及导导出等功功能。1）日志志查询：支持按按时间段段或者类类型以及及他们组组成组合合条件查查询日志志。2）日志志删除：为了控控制日志志记录占占有过多多的存储储空间，海海量实时时数据平平台提供供自动删删除和手手动删除除日志功功能。 自动删除除是根据据配置策策略，在在系统运运行中自自动对满满足删除除条件的的记录进进行删除除操作。 手动删除除是提供供工具供供用户进进行删除除日志记记录操作作。3）日志志导出：支持固固定格式式（如CCSV,XMLL等）导导出日志志的功能能。3.1.7.5 备份和恢恢复在平台系系统运行行过程中中，有时时会出现现硬件故故障、管管理员误误操作等等意外，从从而导致致数据损损坏等情情况发生生。海量量实时数数据平台台应提供数数据备份份和恢复复功能，以以确保数数据安全全。1）备份份的内容容 配置数据据：设备备、量测测及测点点配置数数据等。 历史数据据：保存存在实时时数据库库或关系系数据库库中的测测点历史史数据。 图形数据据：WEEB展示示用的接接线图，潮潮流图等等图形画画面数据据。 软件程序序：海量量实时数数据程序序文件，包包括：数数据接入入、数据据处理、数数据存储储、数据据访问以以、平台台管理以以及支持持工具等等。 操作系统统：操作作系统配配置信息息、程序文文件以及及日志等等。2）备份份管理 能够实现现自动备备份和手手动备份份二种功功能。 备份方式式：有完完全备份份和增量量备份二二种方式式。完全全备份是是备份全全部内容容，增量量备份只只备份从从上次备备份以来来的所有有变化。完全备份的数据可以单独用来恢复系统，但要将增量备份恢复，必须从之前的完全备份开始逐步恢复。 备份方法法：对于于实时库库数据备备份，采采用实时时库自带带备份功功能备份份，备份份策略可可人工设设定；对对于关系系库，采采用关系系库自带带的导出出工具备备份；对对于文件件，采用用压缩等等方法备备份；操操作系统统备份一一般采用用克隆镜镜像的方方法。 备份情况况监视：显示备备份进度度以及内内容信息息。 备份异常常处理：备份过过程中出出现异常常给出详详细提示示。3）恢复复管理 数据恢复复：包括括配置数数据、历历史数据据、图像像数据等等，这些些数据存存储在实实时数据据库或者者关系数数据库中中，数据据恢复要要保证数数据的一一致性。 平台恢复复：根据据备份，快快速的恢恢复平台台到之前前的状态态。 平台镜像像：查看看实时数数据平台台镜像服服务的运运行情况况；检查查数据库库中相同同测点的的数值、时时间标签签和数据据刷新情情况，判判断镜像像软件运运行是否否良好。4）归档档管理 平台归档档的主要要内容包包括：日日志文件件的归档档处理、备备份文件件的归档档处理、实实时数据据库产生生的历史史数据文文件归档档处理； 归档策略略设定包包括：根根据需要要可设定定归档的的周期，设设定归档档文件命命名规则则； 归档文件件查询统统计：可可根据日日期检索索归档文文件；可可根据条条件查询询归档文文件。3.1.8 支撑工具具海量实时时数据平平台提供供应用开开发支撑撑工具，包包括组态态工具、报报表工具具以及WWEB发发布等方方面功能能。基于于海量实实时数据据平台，利利用平台台提供的的支撑工工具，通通过二次次开发，可可以提供供多种应应用服务务。3.1.8.1 组态工具具平台提供供各种图图形界面面组态和和管理功功能，包包括：主主接线图图、趋势势曲线、流流程图、棒棒状图、参参数图。具体要求求包括：1）趋势势图：在在界面上上显示实实时数据据的趋势势曲线，时时间轴可可以任意意设定，参参数上下下限可以以按数据据点上下下限和自自定义格格式进行行设置。在在一幅画画面上可可以任意意设定多多条颜色色不同的的趋势曲曲线；2）报警警图：客客户端可可以显示示现时刻刻和以前前的各类类不同等等级的报报警记录录。具备备权限的的用户可可以编辑辑报警参参数，终终端用户户可以修修改报警警提示方方法，如如改为声声音报警警，报警警时触发发自己事事先录制制好的某某个声音音，并提提供报警警的确认认和消除除；3）支持持全图形形、高分分辨率、快快速响应应的图形形显示，具具有平滑滑移动、无无级缩放放和移动动画面的的功能。4）提供供在图形形界面上上定义数数据库、图图形、曲曲线画面面、表格格的工具具。定义义基于各各种数据据的动态态数据、各各种图符符、字符符和汉字字。5）对于于XX系系统中的的一些常常用的图图形工具具，如饼饼图、仪仪表、列列表等，提提供集成成的生成成工具。6）直接接在画面面上定义义动态点点（包括括动态汉汉字），在在线连接接到系统统中去。7）制图图过程应应可在线线完成，增增加、修修改、删删除画面面不能影影响实时时数据平平台的正正常运行行。8）常用用图形可可以保存存成模板板，随时时调用。9）在图图形上可可以方便便查看测测点信息息。3.1.8.2 报表工具具报表系统统用于生生成所需需要的历历史数据据和实时时数据报报表。功功能如下