勘探开发大数据建设与应用探讨

鲁明公司鲁明公司一、大数据概述二、勘探开发大数据建设三、当前系统应用模式分析四、主题应用模式探讨鲁明公司鲁明公司一、大数据概述随着移动互联网、云计算、物联网等的快速发展，视频监控、智能终端等的快速普及，数据在潜移默化地影响着人们的生活。关于大数据，业界并没有一个统一的定义，现在炒得比较火的“大数据”概念是指利用各种手段，挖掘出爆发式增长的海量数据中存在的潜在价值。我们正在面临一个“大”问题核心问题鲁明公司鲁明公司数据量级已从TB（1024M字节）发展至PB乃至ZB，可称海量；鲁明公司目前核心数据5.6TB。大多是网页、图片、视频等半结构化和非结构化数据信息，比如测井库就是结构化的井信息与非结构化的曲线流相结合的产物。一、大数据概述四大本质特征数据量大类型繁多价值密度低速度快时效高4V鲁明公司鲁明公司一、大数据概述四大本质特征数据量大类型繁多价值密度低速度快时效高4V以视频安全监控为例，连续不断的监控流中，有重大价值者可能仅为一两秒的数据流；360°全方位视频监控的“死角”处，可能会挖掘出最有价值的图像信息。“四化”建设中的很多实时数据其实并不重要，这听起来似乎很残酷，但是驾驭大数据的一个关键是要鉴别出那些重要信息。而在应用中设定报警、预警参数值或范围就是有效过滤大数据，使数据变得有价值的一个缩影表现。鲁明公司鲁明公司一、大数据概述四大本质特征大部分数据挖掘最显著的特征一切硬件发展4V云计算、物联网、移动计算…..,都是为大数据而生速度快时效高数据量大类型繁多价值密度低鲁明公司鲁明公司比如在购物的淘宝网搜索某个名词“水壶或笔记本”，会有大量有关水壶的信息，但此时从看新闻的凤凰网上就能定位您刚搜索的水壶信息，两个不同用途的网站能快速扑捉到用户的最新想法，这就是大数据的“定点投放”价值；一、大数据概述身边的大数据鲁明公司鲁明公司我们也不会再为拉油车辆去哪里了而苦恼，有了移动定位与GPS定位相结合的实时车辆定位系统，能很清楚的知道车辆运行状况，这就是两个方位数据结合的价值。一、大数据概述身边的大数据鲁明公司鲁明公司一、大数据概述关键三维度Variety多样Volume大量Value价值Velocity快速可实时性可解释性数据准确稳定性数据能不能用的关键三维度延伸大数据从4V的本质特征延伸至现在的3个维度按三个关键维度开展勘探开发大数据建设鲁明公司鲁明公司一、大数据概述二、勘探开发大数据建设三、当前系统应用模式分析四、主题应用模式探讨鲁明公司鲁明公司就石油工业而言，大数据一般是伴随勘探、开发、生产过程产生的原始数据和成果数据，地震和测井数据尤为突出。二、勘探开发大数据建设鲁明公司鲁明公司今天的我们已经开始重视大数据建设工作，并已经形成了一定层次的信息成果………都在应用中实现着自身的价值二、勘探开发大数据建设开发月度数据历史复算解决了历史遗留问题采油工程数据库稳步运行源头数据采集质量提升测井、动态监测数据库广泛应用地理信息系统建立地质完井总结和作业施工总结文档库形成完井报告与作业井史数字化成果形成鲁明公司鲁明公司序号类型数量单位容量(GB)备注1测井蓝图3900.00张1142.582测井库1310.00口井3.203完井报告1295.00口井10.124岩芯录井图300.00口井87.895岩屑录井图970.00口井293.656分析化验报告612.00份4.187试油试采报告201.00份0.498作业报告1334.00口井19.549生产数据1334.00口井0.6510研究报告401.00份5.8711平面图100.0012档案室其他资料2000.0013其他数据库2000.00合计5668.18根据粗略统计，鲁明公司现有地质研究核心数据5.6TB的数据量，冗余数据总量约50TB。二、勘探开发大数据建设鲁明公司鲁明公司各类数据库分别为相关研究提供支持地层对比地震解释……二次解释这么大的数据量、多类型数据体分布在不同专业的数据库中，为综合研究、生产分析提供有力支撑。二、勘探开发大数据建设鲁明公司鲁明公司数据来源于13个专业的源头数据和基于源头再处理的成果数据而我们现在用到的测井、动态监测、注采对应率、地理信息都是基于源头而又相对独立产生的专业项目库，是对源头数据的补充和完善，目的是更好地挖掘数据价值。二、勘探开发大数据建设两个循环一个循环是怎么建数据目前挖掘数据价值的模式是开发专业研究软件和开发管理系统一个循环是怎么用数据鲁明公司鲁明公司获取数据格式不同无法满足专业用户快速、灵活构建应用模块的需求软件研发与需求对接复杂三、当前系统应用模式分析1、专业研究的数据获取方面2、专业应用软件研发方面成果共享程度不足成果格式不同辅助查询方式独立相同数据不能共用单机C/S版浏览器B/S版专业研究软件独立运行查询功能相对专一相同组件重复开发产生成果缺乏共享开发管理3、专业应用服务方面11个现象当前应用系统现状示意图鲁明公司鲁明公司三、当前系统应用模式分析1、专业研究的数据获取方面目前存在的不适应不同分析研究对应不同专业软件，对数据要求差别较大同一区块不同研究需整理多套研究数据如“小层数据”在油藏动态软件中是一种格式，建模软件又是一种格式，数据准备的要求不同。配套软件专业研究动态分析油藏动态软件建模数模direct软件小层数据体需要的数据体不同格式获取数据格式不同鲁明公司鲁明公司获取数据格式不同无法满足专业用户快速、灵活构建应用模块的需求软件研发与需求对接复杂三、当前系统应用模式分析1、专业研究的数据获取方面2、专业应用软件研发方面成果共享程度不足成果格式不同辅助查询方式独立相同数据不能共用单机C/S版浏览器B/S版专业研究软件独立运行查询功能相对专一相同组件重复开发产生成果缺乏共享开发管理3、专业应用服务方面11个现象应用现状示意图鲁明公司鲁明公司研发人员与专业人员结合需求研发软件系统阶段汇报调整系统测试修改完善多次循环反复仍然无法满足专业用户需求三、当前系统应用模式分析2、专业应用软件研发方面按目前研发模式，软件研发与专业应用需求对接复杂、困难，甚至有时是脱节的。鲁明公司鲁明公司以开发形势变化分析为例：在宏观管理层次上，不仅想得到不同油田（开发单元）、不同开发单位的开发形势变化，还想得到不同类型油藏，不同驱替方式、不同含水阶段等多专题的开发形势变化；而软件研发难以满足快速、灵活构建应用模块的需求。开井数1357开井数1357开井数1357开井数1357日注05010015020000.8101201.2468101202.2468101203.2468101204.2468101205.2468101206.2468101207.2468101208.2468101209.2468101210.24不同油田（开发单元）不同开发单位不同类型油藏开发形势变化分析数据体不同驱替方式不同采出程度不同含水阶段三、当前系统应用模式分析2、专业应用软件研发方面鲁明公司鲁明公司获取数据格式不同无法满足专业用户快速、灵活构建应用模块的需求软件研发与需求对接复杂三、当前系统应用模式分析1、专业研究的数据获取方面2、专业应用软件研发方面3、专业应用服务方面成果共享程度不足成果格式不同辅助查询方式独立相同数据不能共用单机C/S版浏览器B/S版专业研究软件独立运行查询功能相对专一相同组件重复开发产生成果缺乏共享开发管理11个现象应用现状示意图鲁明公司鲁明公司不同研究工作均配备了相应的专业软件，提高了地质研究工作效率和质量。业务主要软件引进单位地层对比CycloLog分公司Carben采油厂测井二次解释Forward.Net分公司EZLog分公司地震解释GeoFrame分公司Discovery分公司地质绘图StratFrame分公司Geomap采油厂地质建模Direct分公司Petrel爱国版……三、当前系统应用模式分析3、专业应用服务方面单机C/S版软件现状专业研究软件独立运行专业软件的推广及利用率仍需提升鲁明公司鲁明公司目前存在的不适应各项研究业务相对独立，沟通欠佳。如做地层对比时，正常流程是测井解释划一遍砂层组后，地层对比人员就是在此基础上搞清地层关系；但是现在各干各的，地层对比人员会把测井解释人员的工作再做一遍。三、当前系统应用模式分析地层对比测井解释地震解释地质建模基础数据、基本资料、研究成果等成果共享程度不足3、专业应用服务方面鲁明公司鲁明公司如分别用卡奔和Cyclolog软件进行地层对比研究时，输出成果格式不同；图形成果库中存放着不同软件产生的不同格式的成果数据体，共享利用率不高。三、当前系统应用模式分析目前存在的不适应不同专业软件有不同成果格式，同一区块不同成果需整理多次来实现共享。输出成果配套软件专业研究地层对比卡奔软件cyclolog软件成果文件不同格式应用与其他研究重新整理成果格式不同3、专业应用服务方面鲁明公司鲁明公司获取数据格式不同无法满足专业用户快速、灵活构建应用模块的需求软件研发与需求对接复杂三、当前系统应用模式分析1、专业研究的数据获取方面2、专业应用软件研发方面3、专业应用服务方面成果共享程度不足成果格式不同辅助查询方式独立相同数据不能共用单机C/S版浏览器B/S版专业研究软件独立运行查询功能相对专一相同组件重复开发产生成果缺乏共享开发管理11个现象应用现状示意图鲁明公司鲁明公司不同开发业务管理研发了相应的管理系统，为开发管理工作提供了方便，提高了管理效率。………老区管理系统新区管理注采对应率单元目标化注采管理新区管理系统注采对应率查询统计单元目标化管理系统采油队井组注采管理系统……开发动态钻井测井录井试油老区管理三、当前系统应用模式分析3、专业应用服务方面浏览器B/S版现状鲁明公司鲁明公司三、当前系统应用模式分析目前存在的不适应3、专业应用服务方面辅助查询方式独立各个查询系统不存在相关性，如查某井测井曲线和日动态数据都要重复录入“井号”字段才能查询内容。鲁明公司鲁明公司三、当前系统应用模式分析目前存在的不适应统计数据需要打开多个系统，重复输入用户名切换查询。3、专业应用服务方面查询功能相对专一鲁明公司鲁明公司三、当前系统应用模式分析3、专业应用服务方面如采油工程处的采油工程决策系统与开发处的自然递减分因素控制系统都本着一个相同的目的，需要对不满24小时生产的油井时率进行原因分类，仅仅因分类标准侧重点不同，就要重复采集两次。相同数据不能共用鲁明公司鲁明公司三、当前系统应用模式分析3、专业应用服务方面维护使用人员累研发人员累浏览器B/S版现状辅助查询方式独立相同组件重复开发相同数据不能共用产生成果缺乏共享查询功能相对专一不应适鲁明公司鲁明公司三、当前系统应用模式分析数据获取专业应用软件研发专业应用服务类型格式多软件研发与需求对接复杂无面向用户的集成平台表象根本原因？面向应用的数据结构有问题？组件开发问题？需要建立新机制已有系统如何优化新系统如何开发鲁明公司鲁明公司解决方案三、当前系统应用模式分析组件开发问题建立新机制？面向应用的数据结构有问题？开发最基础的应用组件已有系统新系统自助式应用综合研究桌面软件项目库标准文件格式支持工具支持工具主题应用项目库13个专业源头数据库支持工具鲁明公司鲁明公司一、大数据概述二、勘探开发大数据建设三、当前系统应用模式分析四、主题应用模式探讨鲁明公司鲁明公司四、主题应用模式探讨源头关系型结构是以源头采集为目的设计的，为最大限度满足各种业务数据需求，设计时尽可能将不同专业需要的数据全部容纳下来，其结构设计比较复杂，层次比较深，很多数据表不适合应用系统要求。（1）数据库结构应按应用要求重新设计，不能照搬源头数据结构序号分类采集单位1物探物探公司2钻井钻井公司3测井测井公司4录井录井公司5试油测试井下作业公司6分析化验地质院7油藏地质采油厂（开发）8采油设备9工艺管理10井下作业11油气集输12储量管理13地面工程源头采集专业分类表1、主题应用项目库结构设计三必要鲁明公司鲁明公