为什么我们需要打破数据孤岛?
数据竖井(Data silos)指的是不同组织之间的信息仅为私人所有,不为外界所知,其他人无法访问。这就像农民把作物放在自己的谷仓里,不与他人交换或贸易,导致了资源的浪费,减少了他们的潜在收益。在大数据时代,数据被视为企业的竞争优势之一,所以说服大家分享信息是非常困难的,但是我们仍然可以通过以下几点来说服大家。
为什么数据竖井是一个问题?
数据竖井会给组织带来问题,原因有以下几点:
缺乏完整的视角
当数据处于竖井中时,组织无法获得全企业范围的360度视图。在这种情况下,任何相关的数据链接都将丢失。以营销活动及其产生的利润为例,如果这些信息能够与来自同一地区销售团队的当前销售数据的信息相结合,就会导致对营销活动做出更明智和有效的决策。但由于竖井的存在,这样的信息共享无法实现。美国百货公司之父约翰·沃纳梅克曾经说过:“我花在广告上的钱有一半是浪费的;问题是,我不知道是哪一半。”
浪费资源
每个团队都有一个客户信息数据库,并以不同的格式保存这些信息,在这种情况下,很有可能出现信息重复。但是,尽管存在大量的重复,组织最终还是要承担存储来自两个团队的信息的成本。这种数据竖井产生了更高的存储成本,增加了财政资源的压力。
不一致的数据
当数据被复制并存储在一起时,数据不一致也会被引入公司的信息流。信息集的一个字段(例如客户地址)可能以多种格式存储,从而导致不一致。再加上在输入地址时可能出现的人为错误,存储的数据中可能存在许多不一致的地方。
数据竖井如何影响组织?
虽然各部门分开运作,但它们在许多层面上是相互依存的。例如,来自财务部门的数据可以用于市场和销售部门的分析。随着企业寻求获得竞争优势、提高运营效率和开辟新的业务机会,同时降低成本,这些需求将推动组织使用数据完成更多任务。为此,访问企业范围内的信息对成功至关重要,而数据竖井可能阻碍这一发展。
限制数据视图
因为竖井阻止了信息共享,每个部门的分析仍然只应用于内部。因此,如果数据不能在所有涉众之间共享,企业中普遍存在的低效率可能就不会暴露出来,降低运营成本的所有机会就会失去。
数据完整性的威胁
数据竖井会导致部门数据的不一致,随着时间的推移,每个不一致都会继续导致不准确和无用的数据。这在医疗领域很常见,患者信息存储在多个竖井中,如医生摘要、护理记录、药物摄入和程序描述,这些竖井是不相关的,经常不同步,并导致广泛的差异。
不利的协作文化
公司的工作文化助长了竖井,这反过来又强化了不利于合作的文化。难以获取的数据减少了合作的机会。在今天的公司中,往往有复杂的结构或下属组织,但它们之间的信息不一定像我们想象的那样流动。例如,每个团队存储数据的位置是不同的,有些可能在部门的大型机上,有些可能在公司的服务器上,有些甚至可能在自己的云驱动器上。这个时候,每个部门可能不知道对方在做什么,导致每个团队存储相同的重复数据,浪费了公司的硬件资源,使团队之间的信息量无法流动。
让我们再举一个例子,通常一个有一定规模的公司会有一些分散在不同部门的数据工程师。通常情况下,工程师没有足够的资源进行开发。这时,如果公司对数据的需求持续增长,需要每个部门建立自己的数据库,因为不同部门之间的数据无法连接,每个工程师都需要从头开始。开发系统,构建相同的框架,使用相同的底层数据,使工程师超负荷工作,使他们无法及时向公司报告。
数据仓如何影响市场?
大型数据仓库垄断了市场
近年来,谷歌、亚马逊、Facebook等主要电子商务公司几乎垄断了数字广告市场。自2016年以来,美国总广告收入的增长几乎来自于两家领先的电子商务公司谷歌和亚马逊。如此夸张的市场份额,让人们对自己操纵市场的能力有了更深刻的认识。
但总会有人会想:“这有什么问题吗?”谷歌和Facebook也分别推出了谷歌广告和Facebook广告管理器,这样用户就可以看到他们发布的网站表现如何。
这在短期内可能不是市场的问题,但从长远来看,如果我们今天质疑谷歌的流量计算机制,即使现在大型电商已经形成了数据围墙花园,也无法得到第三方平台的证实。
谷歌Ads也使用这个平台允许用户投放广告。玩家和裁判的行为使得用户无法突破数据竖井的限制,无法了解不同平台渠道之间的广告转化率,进而拓展更多的营销模式。在大型电子商务的花园中可以自给自足。
相信大家对数据竖井都有一定的了解,也都明白,无论是企业还是个人,都应该打破数据竖井,让整体利益最大化。