近日,由中国通信标准化协会主办,中关村科学城管委会支持、中国通信标准化协会大数据技术标准推进委员会(CCSA TC601)承办的“2024DataOps发展大会”成功在京举办,本次大会围绕 “DataOps(数据研发运营一体化)”及“人工智能数据治理”两大主题发布多项研究成果,科杰科技参编的《DataOps标准-交付管理》正式发布 。
数据研发运营一体化(DataOps)将敏捷、精益等理念融入数据开发过程,通过对数据相关人员、工具和流程的重新组织,打破协作壁垒,驱动企业构建集开发、治理、运营于一体的数据加工流水线。交付管理作为DataOps实践的重要环节,助力企业团队构建自动化、标准化的数据测试交付流程,保障数据开发团队高效地进行开发和测试,提升数据产品交付质量和效率。
本次编写的《数据研发运营一体化 (Dataops) 能力成熟度模型第三部分:交付管理》标准包括配置管理、测试管理、部署与发布管理三大能力域,针对数据交付核心环节的要求进行明确:
1、 配置管理
聚焦于加强代码版本管理,通过建立完善的版本管理规范和人员权责机制,帮助企业避免因版本混乱、环境配置错误而引发的数据质量问题。
2、 测试管理
建立覆盖代码质量测试、数据逻辑测试、需求匹配度测试、数据质量测试的多层次数据测试体系,实现数据测试策略和测试报告的统一管理,形成数据测试反馈闭环,持续优化数据测试流程。
3、 部署与发布管理
引导企业提升数据部署效率和发布质量,通过统一的发布对象管理和部署流程,逐步构建自动化部署流水线,实现持续部署与发布。
科杰科技在数据工程化能力(DataOps)上做了长期的技术投入,产品提供数据开发、持续交付、智能调度、主动治理等数据开发与数据治理一体化平台级能力,支持复杂场景的大规模项目跨团队协同能力,整个开发过程提供计算引擎Router能力;提供智能资源调配APS技术,简化了数据从被发现到转换、管理、洞察以及定制的全过程,资源文件自动Mapping、Deploy、Rollback以及Baseline监控能力,并在整个数据工程过程中提供性能、安全、质量等指标影响分析的能力,可充分的保障数据一致性、完整性,扩大了大数据技术在关键核心系统中的应用范围;提供民主化的数据访问(democratized data access)和数据运营反馈循环,所有数据需求方可以在组织数据治理策略的约束下,安全、优质地获取数据洞察。
此外,科杰科技DataOps能力得到行业广泛认可,湖仓一体数据底座 KeenData Lakehouse以领先的DataOps能力入选Gartner数据基础软件代表厂商,入选爱分析DataOps厂商全景报告,成为信通院首批DataOps产品创新实验室单位之一,联合创始人&副总裁郭振强受聘为信通院DataOps专家,积极参与信通院DataOps系统工具标准专家研讨会等。
基于DataOps研发治理一体化能力的科杰科技数据底座已经在央国企、金融、工业、能源、汽车、零售多个重要行业落地,通过开发治理一体化的方式,帮助企业充分挖掘数据价值,促进数据资产的管理、运营、共享与协作,从而实现数据价值的最大化,并最终实现全方面的数据价值反哺业务。