工业互联网数据管理
工业互联网数据管理
工业互联网数据管理
工业互联网的数据有多种,既有文件,又有数据库,还有时序工业数据。
对应的存储数据有实时数据库,时序数据库,NoSQL数据库,关系型数据库。
数据特点
工业数据特点有三
- 数据类型多样
- 数据特点显著 带有时间戳、数据源唯一、结构化、少有或几乎没有更新
- 工业时序数据以数字为主。
工业数据的维度
工业数据从层次来看,分为设备数据和逻辑分区数据。从实时性来讲的话,有实时数据和离线历史数据
数据分类
### 设备数据分类 - 数据 基础数据,综合数据 - 属性 设备位置,供应商,设备编号 ### 逻辑数据分类 - 原始数据 - 点位聚合数据 - 表达式计算数据
数据格式及命名规范
### 格式
- 数据格式: 数据key:value
- 属性格式: 属性key:value ### 命名规范
- 设备采集点位 所见即所得,参照国际标准、国家标准、行业标准、企业标准
- 聚合数据 采集点位+聚合类型。聚合类型:INTERVALSUM、SUM、MAX、MIN、AVG
- 表达式类型 参数点位规范和表达式涵义
- 自定义类型 根据企业内部的规定进行自定义
实时与离线
数据从业务端产生,到分析或者反哺业务使用,需要经过一系列的清洗、处理过程,而这一过程带来时间窗口大小,就是数据的时效性。按照数据延迟的大小,可以将数据分为离线数据和以及实时数据(准实时)。
实时数据
实时数据主要是指的数据延迟小,例如毫秒、秒、分钟级的延迟。 小时级的延迟称之为“准实时数据
离线数据
离线数据一般是指T-1的日期, 也可指T-1小时
数据流转
数据从设备采集上来,再到平台上进行存储,处理,再利用,完成了数据的流转和处理。
平台计算能力
批量计算
本文由作者按照 CC BY 4.0 进行授权