| 题名 | 油气物联网实时数据管理的研究 |
| 作者 | 汪燕 |
| 答辩日期 | 2016 |
| 导师 | 冯涛 |
| 关键词 | 油气生产 物联网 实时数据 大数据 数据完整性 |
| 学位名称 | 硕士 |
| 英文摘要 | 随着物联网技术在油气生产中的应用不断深入,安装于井场的仪表通过检查、测量、分析、计算所得到的现场数据由RTU上传至井控SCADA系统,以便对油气生产过程进行数据展示、远程监控与管理。这些实时数据被存放在实时数据库中和历史数据库中,为了便于管理和组织这些实时数据,需要将这些基于标签存储的工业实时数据转换为适合分析的业务数据,利用这些分析型业务数据实现告警和预警等决策,便于查询和二次决策。本文针对实时数据的分类处理和管理过程设计了应用服务层和生产数据采集层之间的开放式结构——实时数据处理系统。首先,以油气物联网项目中实时数据的组织、发布、生产单元分类处理为需求,在深入考虑实时数据在油气物联网生产中的数据采集、传输、存储及存储标准的基础上,研究了实时数据的业务功能以及如何划分系统模块,同时分析了实时数据处理过程中的不足,包括存储过程中数据量敏感、存储成本高,数据采集与应用的频度相对固定、不易调整,数据丢失后,难以恢复等问题。其次,对目前基于多线程的实时数据处理系统进行了性能测试,性能测试包括基准测试,负载测试和持续性测试。重点分析了负载测试中实时数据的主要功能区单井检测页的健康度、最大响应时间、最小响应时间、平均响应时间以及响应错误码。由实验结果可知,由于采集及处理环节的复杂性,传统的多线程处理实时数据的方式导致了系统的响应速度会随着用户数的增加而变的很慢,为了加速数据处理和响应的实时速度,本文设计了一套基于Hadoop平台的实时数据处理及转换系统。最后,对比目前常见的几种保证数据完整性的算法,结合油气物联网系统中实时数据完整保护的需求,选用MD5算法进行实时数据分组,从而加快实时数据的处理速度并保证历史数据完整性,完成系统数据向上层的快速、准确传输。 |
| 语种 | 中文 |
| 页码 | 59 |
| URL标识 | 查看原文 |
| 内容类型 | 学位论文 |
| 源URL | [http://ir.lut.edu.cn/handle/2XXMBERH/91888]  |
| 专题 | 兰州理工大学 |
| 作者单位 | 兰州理工大学 |
| 推荐引用方式 GB/T 7714 | 汪燕. 油气物联网实时数据管理的研究[D]. 2016. |
| 个性服务 |
| 查看访问统计 |
| 相关权益政策 |
| 暂无数据 |
| 收藏/分享 |
除非特别说明，本系统中所有内容都受版权保护，并保留所有权利。
修改评论