大数据环境下基于Spark的油藏经营管理系统研究

声明

第一章绪论

1.1 研究背景

1.2 国内外研究现状

1.2.1 油藏经营管理系统的国内外研究

1.2.2 大数据的国内外研究

1.2.3 传统油藏经营管理系统结构概述

1.3 研究目的与意义

1.4 论文组织

第二章大数据环境下基于Spark 的油藏经营管理系统总体结构

2.1相关理论和技术

2.1.1 大数据的基本概念

2.1.2 Hadoop 技术概述

2.1.3 Spark架构概述

2.2系统的体系架构设计

2.2.1 系统的体系架构

2.2.2 油藏经营管理分析概述

2.3 系统数据模型体系结构

2.3.1 大数据工具Hive

2.3.2 数据仓库主题

2.3.3 事实表的设计

2.3.4 多维数据表的设计

2.3.5 数据库表的设计

2.4 本章小结

第三章大数据环境下基于Spark 的油藏经营管理系统数据模型设计

3.1 系统功能模块设计

3.2 系统技术模块设计

3.2.1 数据ETL 模块的设计

3.2.2 数据计算分析模块设计

3.2.3 数据存储展示模块设计

3.3 大数据环境下基于Spark的油藏经营管理系统数据存储设计

3.3.1 数据存储结构设计

3.3.2 数据存储结构优化

3.3.3 数据模型优化

3.4大数据环境下基于Spark的油藏经营管理系统算法设计

3.5 本章小结

第四章大数据环境下基于Spark 的油藏经营管理系统实现与应用

4.1 大数据集群环境

4.1.1 集群的软硬件环境

4.1.2 部署Hadoop 集群

4.2 Spark计算模型设计

4.3.1 数据库Hbase 简介

4.3.2 数据库Hbase 存储与优化

4.3.3 数据库Hbase 查询与优化

4.4 数据ETL 实现

4.5 系统应用

4.5 系统测试

4.6 本章小结

第五章总结与展望

5.1 论文工作总结

5.2 展望

致 谢

参考文献

攻读学位期间参加科研情况及获得的学术成果