最佳实践案例
某石化公司·建设背景
石油行业是一个多学科、多专业相互配置、相互渗透、协同攻关的知识、技术密集型产业,其上游企业的主要业务涉及到油气勘探、油气田开发、钻井工程、井下作业工程、地面建设、物资管理、经营管理、水电、通讯、医疗卫生等多方面内容。石油行业的信息化一致伴随着石油企业的发展,并发挥了巨大的作用。
石油行业数据存在以下几种显著特点:数据分布极为分散,数据量巨大,数据结构复杂,数据利用价值高,存储介质多、格式复杂以及软件使用环境复杂。基于上述问题和困难,需要搭建数据中台对接数据源以及应用层。汇集业务数据,通过标准化数据治理建立数据仓库,推动数据标准化、资产化;构建全域的、标准统一的数据资产;提供满足各业务场景的数据服务;并为高层提供数据决策支持。
项目目标
- 01
基于当前系统进行数字化升级
依据整体数字化发展战略,在当前总体EPBW基础上,结合未来业务及场景需求,采用云计算、大数据等领先技术手段,建立面向全域数据内容,覆盖数据全生命周期的数据中台。
- 02
数据反哺赋能业务
提升数据共享交换时效性,进一步激活数据资产价值,赋能精细化运营,驱动数据应用、业务模式创新发展。
- 03
提供完善的数据能力
推动数据标准化、资产化、服务化、价值化,最终具备全域数据汇聚、数据治理、数据管理、数据服务能力。
方案架构
建设成果
架构体系升级
科杰数据中台架构体系与现有的EPBW架构体系相比,在数据存储、成本、性能、数据安全、扩展性、数据共享服务能力、可维护性等方面均有较大提升。
全域数据资产沉淀
根据神州宏图EPBP元数据库中业务域、主题的划分方式,在勘探院数据中台中完成资产目录及相关元数据设计及配置。
构建全流程数据开发体系
支撑总部5套业务系统,另外实现了12家油田所有epbp系统源业务表每天全量数据汇聚、同步到数据中台;支持数据中台全域数据可视化查询、物理表检索,并且支持业务库查询;遵循数据中台实施方法论,支撑仓库模型设计落地,包括数据主题、统一指标、逻辑模型、物理模型的创建;构建全流程的监控体系,可视化监控全部任务执行情况,快速定位生产问题。
构建数据服务体系
提供快速将数据表生成API的能力,支持将已有API快速注册,实现API的统一发布和授权管理;数据服务认证采用Token、AKSK等方式进行,充分保证安全性和可靠性;提供多维度的API实时运行监控功能,支持检测不同应用API的运行状况;提供界面化配置化方式生成API,为高阶用户提供SQL模式生成API,支持多表关联、复杂查询和聚合函数。
相关产品
Keen DaaS 数据服务平台
数据服务发布中心,无缝对接业务生产系统,解决数据最后一公里使用的问题。支持SQL、拖拽方式快速创建服务API,提供API的完整生命周期管理,包括创建、维护、发布、运行、监控、下线等。
查看详情Keen Stream 实时计算平台
提供全可视化、简单易用、高吞吐量、高容错、一站式流数据计算处理平台,支持SQL进行实时数据清洗、数据分析、数据同步,全面的监控机制,保证流式计算的准确性。可支撑企业实时数仓构建、实时数据大屏、实时报表等企业各类实时数据处理场景的应用。
查看详情Keen BDP 数据开发管理平台
提供全面托管的工作流服务和一站式开发管理功能,赋能企业全链路构建和管理大数据能力,实现全域数据资产管理,建立私有大数据中心。
查看详情Keen Asset 数据资产目录
企业统一的数据资产门户,作为企业数据资产的地图,可以面向企业各个角色对于数据的信息查询、追溯数据的来龙去脉及具体的加工计算逻辑;数据资产在数据开发建设过程中自动沉淀,无须手工维护。
查看详情Keen Dsync 数据同步系统
一站式数据同步产品,用于企业多源数据融合。解决企业内关系型数据库、非关系型数据库、大数据平台、文件系统等复杂异构数据源之间、大数据量高并发下的数据交互和数据同步问题,实现企业内数据统一共享和分发。
查看详情