某石化公司·建设背景
石油行业是一个多学科、多专业相互配置、相互渗透、协同攻关的知识、技术密集型产业,其上游企业的主要业务涉及到油气勘探、油气田开发、钻井工程、井下作业工程、地面建设、物资管理、经营管理、水电、通讯、医疗卫生等多方面内容。石油行业的信息化一致伴随着石油企业的发展,并发挥了巨大的作用。
石油行业数据存在以下几种显著特点:数据分布极为分散,数据量巨大,数据结构复杂,数据利用价值高,存储介质多、格式复杂以及软件使用环境复杂。基于上述问题和困难,需要搭建数据中台对接数据源以及应用层。汇集业务数据,通过标准化数据治理建立数据仓库,推动数据标准化、资产化;构建全域的、标准统一的数据资产;提供满足各业务场景的数据服务;并为高层提供数据决策支持。
项目目标
依据整体数字化发展战略,在当前总体EPBW基础上,结合未来业务及场景需求,采用云计算、大数据等领先技术手段,建立面向全域数据内容,覆盖数据全生命周期的数据中台。
提升数据共享交换时效性,进一步激活数据资产价值,赋能精细化运营,驱动数据应用、业务模式创新发展。
推动数据标准化、资产化、服务化、价值化,最终具备全域数据汇聚、数据治理、数据管理、数据服务能力。
方案架构
建设成果
科杰数据中台架构体系与现有的EPBW架构体系相比,在数据存储、成本、性能、数据安全、扩展性、数据共享服务能力、可维护性等方面均有较大提升。
根据神州宏图EPBP元数据库中业务域、主题的划分方式,在勘探院数据中台中完成资产目录及相关元数据设计及配置。
支撑总部5套业务系统,另外实现了12家油田所有epbp系统源业务表每天全量数据汇聚、同步到数据中台;支持数据中台全域数据可视化查询、物理表检索,并且支持业务库查询;遵循数据中台实施方法论,支撑仓库模型设计落地,包括数据主题、统一指标、逻辑模型、物理模型的创建;构建全流程的监控体系,可视化监控全部任务执行情况,快速定位生产问题。
提供快速将数据表生成API的能力,支持将已有API快速注册,实现API的统一发布和授权管理;数据服务认证采用Token、AKSK等方式进行,充分保证安全性和可靠性;提供多维度的API实时运行监控功能,支持检测不同应用API的运行状况;提供界面化配置化方式生成API,为高阶用户提供SQL模式生成API,支持多表关联、复杂查询和聚合函数。