热门关键词: 南昌 科技 服务 创新
当前位置: 首页>> 技术成果>> 成果库详情
  • 技术成果详情

二维数据的存储系统、存储方法和查询方法

分类 : 技术

日期 : 2019-10-21

浏览次数 : 9

来源 : 政和通APP

收藏

详细内容

本发明所述二维数据,是指包含时间信息的二维数据,指来自于按照时间周期返回数据的传感器的数据,即二维数据是指一个测点某个时间点对应的数据,或者是一个时间点某个测点对应的数据。这类传感器通常被安装在需要实时检测的设备上,如:仪表盘、锅炉等,通过传感器传回检测设备的属性数据,如:某时刻的温度、压力、流量等数据。此类传感器通常按周期返回数据,完整的时间周期内的数据,可完整记录下设备的整个运行状况。

某一时刻,传感器反馈的二维数据包括时间维度、测点维度信息以及测量数据值信息,现有技术中,二维数据通常以时间标识、测点标识以及测量数据值的格式存储,并在测点维度和时间维度上附加索引,以加快查询速度。在设备出现问题时可通过历史记录进行问题分析和问题定位。

当前,应用发展的趋势表明,被监测个体的数目正在迅速增长,同时,随着技术的进步以及应用的需求,要求在有具体需求时,数据的存储和查询均快速做出反应,要求数据回传的周期越来越短,同时对存储和查询数据的效率要求也越来越高。

本发明的目的在于针对现有技术的不足,提供一种占用资源少、查询速度快、存储效率高的二维数据的存储系统、存储方法,以及二维数据的查询方法。与现有的索引方法相比,大大减少了测点和时间维度信息的存储,可根据保存在元数据区的信息,通过计算快速定位所要查询的测量数据,极大提高了数据的存储效率和查询速度。

采用本专利所实现的原型系统在记录数在亿级规模的实施例上进行二维数据的存储和查询,存储效率在每秒数亿条数据,查询效率也在每秒亿条数据的数量级,在同样的硬件条件下,均大大优于目前流行的商用关系数据库系统。且内外存占用少,断面模式存储程序的内存占用不超过5M,批量模式存储程序的内存占用不超过1.5M,快速查询程序的内存占用不超过1M。一亿两千万条的测量数据的磁盘空间占用不到481M,平均每条数据占用的空间接近于4个字节(实施例中单个测量数据值的存储长度),附加磁盘开销非常小。并且,由于批量存储和断面存储采用相同的数据格式存储,同一套查询程序就可查询两种模式生成的二维数据。

技术信息

信息分类 成果 愿意合作方式 投资入股
成果成熟度类型 通过中试 有效截止时间 2020-12-31
交易状态 技术正在推广
视频网址

联系人信息

在线咨询
联系人姓名 认证用户可见 联系人QQ 认证用户可见
联系人电话 认证用户可见 联系人邮箱 认证用户可见
联系人地址 认证用户可见 联系人单位 认证用户可见
区域 认证用户可见