物联网采集数据存储到MySQL_物联网中的数据分类、存储与应用

本文主要介绍物联网的数据从传感器采集,存储到分析处理的过程

数据分类

物联网数据可以分为静态数据和动态数据

静态数据:被测设备地址类(地点、GIS信息)、设备名称编号(资产属性相关)、设备相关的标签类、设备的规格,静态数据多以结构性、关系型数据库存储

动态数据:以时间为序列的数据,诊断信号类(如温湿度、压力状态)、设备自身状态数据(如电池电量),每个数据都与时间有对应关系,通常采用时序数据库方式存储。动态数据也包含图片、文本、语音和视频等非结构化数据。

数据的生命周期:

数据的时间有效期多长时间,最新的数据可以刷新之前的数据

两次采集最合适的最短周期

数据存储

数据存储分为原始数据存储以及数据质量控制过后的存储(过滤重复、过时或不需要的数据、填补漏读的数据)

结构化数据库:mysql、oracle等等

时间数据库:Hbase

非结构化数据:对象存储、hdfs、mongdb

数据应用

1、数据上屏幕实时展示

比值、数据总量、不同维度分析、统计分析

2、超过阈值报警,人工处理

3、统计分析&报表导出

4、数据分析的方法:

时间序列分析、流式分析、批处理分析 、深度学习技术

5、数据质量控制

物联网的数据质量可以用精确度、置信度和完整性三个指标来衡量。

安全访问控制

防止对任何资源进行未授权的访问、身份验证与授权

  • 1
    点赞
  • 10
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
物联网数据存储主要采用关系型数据库和非关系型数据库两种方式。 关系型数据库:关系型数据库采用SQL(Structured Query Language)语言进行操作,数据以表格形式存储,每个表格有固定的字段。关系型数据库的优点是数据结构清晰,操作简单,支持事务处理和数据一致性,适用于复杂的数据处理场景。常用的关系型数据库有MySQL、Oracle、SQL Server等。 非关系型数据库:非关系型数据库采用NoSQL(Not Only SQL)语言进行操作,数据以文档、键值对、图形等方式进行存储,没有固定的表格结构。非关系型数据库的优点是数据灵活性高,支持海量数据存储和高并发访问,适用于实时数据处理场景。常用的非关系型数据库有MongoDB、Redis、Cassandra等。 操作方式: 1. 关系型数据库操作方式: (1)使用SQL语句进行数据的增删改查操作。 (2)使用ORM框架进行数据的操作,ORM框架可以将数据库表格映射为对象,通过操作对象进行数据的增删改查。 (3)使用数据库的存储过程进行数据的处理,存储过程是一组预定义的SQL语句集合,可以在数据创建和保存,通过调用存储过程进行数据的处理。 2. 非关系型数据库操作方式: (1)使用NoSQL语句进行数据的增删改查操作。 (2)使用ORM框架进行数据的操作,ORM框架可以将文档、键值对映射为对象,通过操作对象进行数据的增删改查。 (3)使用数据库的API进行数据的处理,数据库提供了API接口供开发人员进行数据的处理。例如,MongoDB提供了Java Driver、Python Driver等多种语言的API接口。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值