基于上述用户的期望和行业的先进实践,我总结了数据平台的定义:数据平台是一个统一、端对端的数据生产平台,为企业或组织提供业务价值服务。
三年前我写的关于数据中心平台的文章获得了 10 万 阅读后,我一直在思考一个问题:数据领域本身就是一个非常成熟的领域,但为什么当数据中间台词出现时,它会受到如此多业务和技术方面的追捧和认可?它背后反映的现象和底层逻辑是什么?
仔细来看,我们又可以根据数据中台分别在生产、管理领域的不同应用,将数据中台的能力分为四大核心能力以及三大支撑能力。
在研究了用户的需求和行业的实践后,我基于 DDD 抽象建模数据中台,将企业数据中台的能力分为两个领域:
第二,产生客户价值。企业希望通过数据平台为企业带来收入。数据平台可以解释什么是客户价值?最能衡量客户价值的东西是什么?客户愿意为企业数据洞察力提建议付费和购买吗?
第三,快速响应需求。以前经常听到很多业务部门和数据部门、技术部门沟通:我的报告什么时候开发?我想要的数据什么时候能给我?”。要解决上述问题,需要 IT 企业希望数据中心能提高人员安排的开发效率。用户可以立即获得所需的数据,无论是 API,数据中台可以快速响应需求,无论是宽表还是其他数据形式。
生产领域-数据中心平台的核心能力。假设企业的数据平台主要是收集数据、处理数据、生产数据服务和数据产品,那么企业就相当于一个工厂,工厂的核心能力是生产能力。换句话说,购买原材料、研发产品、生产产品、加工产品、销售经营等一系列能力。这些生产能力是支持企业生存和盈利的核心,也是数据中心必须具备的核心能力。 支持管理领域-数据中心平台。当企业有一定规模时,需要一些管理和辅助的能力来提高生产效率、用户体验和系统安全性。
目前,企业为数据采集、存储、加工、测试等方面提供了大量的新技术和软件。至于业务价值的探索和创新,业务人员需要快速看到企业的数据资产,随意使用数据。目前,企业数据中心的能力仍然不足。实际上包括数据产品的开发和运营 DevOps、包括埋点、包括如何在产品上线后,把产品运营得更好,这些都是数据中台需要的核心能力。
另一方面,数据中心和平台的三种支持能力是使数据更快、更好、更安全地产生价值,包括数据协调和共享能力、数据管理和管理能力、数据运行、维护和安全能力。
数据平台的四个核心能力包括数据资产的收集和存储能力、业务价值的探索和创新能力、数据产品的开发和运营能力、数据的处理和测试能力。事实上,我们谈论的各种技术系统和产品都服务于这些核心能力。
在整个数据处理的整个生命周期链接中,有许多合作伙伴,从数据需求的提出者到数据采集、数据生产、数据开发、测试、在线、操作和维护等阶段,整个链接的用户需要通过数据中心平台进行合作。事实上,目前,由于合作机制不标准、不一致,许多企业在这一环节浪费了大量时间,因此数据中心平台必须具备合作和共享的能力。
一是直接参与业务。无论是架构师,IT 人员或数据人员,每个人都面临着领导者的挑战:你开发数据的业务价值是什么?企业希望数据中心所代表的数据能力不仅是完成报告,而且是提高业务效率,直接为企业带来价值。