郑金辉
作者郑金辉·2023-08-07 14:23
技术总监·某公司

消除数据孤岛,打破中台困局

字数 1537阅读 586评论 0赞 3

之前写了一篇关于数据中台的文章,里面提到了关于数据孤岛的内容,没想到竟然引起了很多人的共鸣。仔细想想好像的确是这样的,数据孤岛的持续存在已经成为制约企业IT建设和数字化转型的根本性难题。对于每个行业客户来讲,如何消除数据孤岛,就成为打破数据中台困局的关键。

一、数据孤岛的形成

“冰冻三尺非一日之寒‘,数据孤岛的也形成也不是一两个人和部门的原因,这里面有IT自身的问题,也有组织的问题。总的来说,一般我们把数据孤岛分成两种情况,一种是物理上的孤岛,一种是逻辑上的孤岛。物理孤岛很容易理解,就是以物理形式单独存在孤立的数据源,这往往是因为在多业态的格局下,缺乏统一的业务战略规划,导致数据在不同部门/业态相互独立存在。逻辑孤岛就相对隐蔽一些,很多行业客户表面上作了数据互联互通,却没有收到应有的效果,这就是因为没有及时关注和消除逻辑孤岛。那什么是逻辑孤岛呢,我们一般认为,不同部门站在自身利益和认知的角度对数据进行单独的定义,一部分本该相同的数据被赋予了不同的含义,增加了数据融合的成本。

对于数据孤岛的形成,除了我们传统认知中的“部门墙“的问题,很大程度上也是因为数据作为企业核心资产没有得到战略重视有关系。数据孤岛的消除要从战略、技术和管理等多个方面协同发力才能取得效果,不要妄想建一两个数仓,建设一个大数据平台就能实现,要做好持续作战的心理准备。

二、思考解决之道

彻底解决数据孤岛,也不是一个一蹴而就的事情,需要统筹规划、分步实施:

1、多源数据融合,解决存量数据的合理应用

消除数据孤岛还是应该首先从需求的角度入手,应该首先解决不同角色和部门对数据的不同诉求。为什么把这一点摆在最前面呢?大家都已经意识到推动数据业务变革的难度了,在任何一个组织内部推动这样一项工作都是困难重重,万事开头难。所以我更赞成,让企业尽快看到数据变革的效益,尽快尝到甜头。那么急于现有数据尽快开展多源数据融合,实现异构数据的整合,实现数据的统一采集和统一存储,形成几个容易见效的主题数据库(数据集市),不失为一个好的选择。

2、明确责任权属,澄清数据责权利

有了一个好的开始,我们就得针对数据孤岛的病根入手了,那就是彻底清算和盘点数据的权属问题,需要坚持一个底线,那就是数据属于整个组织,而不是某个单独的部门和团体。数据的所有权、管辖权和使用权,一定要分开,不能混在一起。在这样一个大的原则下,开展数据责权利的梳理,最好是在企业战略和基本章程里面进行明确。在组织机构层面也需要进行配套的变革,可以设立专门的岗位和部门代表整个组织行使数据的管辖权。

3、实施数据治理,确定数据新秩序

明确了责任边界,就可以在数据团队的带领下,进行彻底的数据治理,也就是建章立制,树立标准规范了,这里就不展开说具体技术了。为什么不一开始就实施数据治理呢,大家都应该清楚,是为了降低推行数据改革的难度,让事情得以顺利实施。其实,数据治理什么时候做,跟组织的行动力和执行力关系非常大,如果是一个高效执行力的组织,第一时间做数据治理也未尝不可。

4、打造数据服务,彻底疏浚数据流

数据治理做完了,数据资源盘点也就明确了,数据的资产化也就有了基础。我们就更明确从业务需求出发,如何构建数据侧服务了。通过数据平台(中台)建设,打造数据服务开放平台,通过数据服务接口建设各类面向业务场景需求的数据应用,甚至可以打造面向敏捷数据需求的自助数据分析服务,做到这一部分我想没有那个业务部门会想着去维护一堆杂乱无序的原始数据,数据孤岛也就是被汹涌的数据洪流给冲散了,我们的数据湖和数据河也会持续奔流。

今天特地没有说太多的技术,只是跟大家探讨数据业务的建设思路和方法,希望能引起大家的共鸣。其实能用技术解决的问题,都不是问题,最大的问题一般都不是技术层面的。

如果觉得我的文章对您有用,请点赞。您的支持将鼓励我继续创作!

3

添加新评论0 条评论

Ctrl+Enter 发表

作者其他文章

相关文章

相关问题

相关资料

X社区推广