当前位置:首页 > 科研成果库

数据中台建设:我们烧了800万,换回一句“别跟风”

2026-08-04 23:25:53小研科研成果库14

三年前,老板从某个峰会上回来,眼睛发光——‘我们要建数据中台!’整个技术部都愣了。没人敢问,那个台子到底长啥样。我当时是数据组的小头目,直接被推上去,就,硬着头皮上。

说实话,那会儿市面上已经把‘数据中台’炒成万能药了。好像有了它,你的数据就不乱了,业务就能飞了。我们公司不大不小的,日活几百万,订单数据跑得吭哧吭哧。老板觉得,该统一一下,打通任督二脉。可这玩意儿,开局就透着诡异。

企业数据中台概念架构图企业数据中台概念架构图

一窝蜂冲进去,结果连‘数据在哪儿’都没搞清

第一个月,我们找了家大厂出来的咨询师。他幻灯片做得极酷炫——满屏的框框线线,什么OneData,什么数据湖仓一体...我们听得很激动。但!回过头来想,我们的数据在哪儿?销售系统一套,库房系统一套,ERP里还一套,每套里的客户编码都不一样!连个统一ID都没有。中台第一步要汇聚数据,可光是对齐字段,就差点让后端小哥辞职。

那段时间会议室里的白板没干过。写满了表结构、脏数据怎么洗。业务部门刚开始很配合——他们以为中台能变魔术。后来发现需要他们填一大堆数据字典,态度就变了:‘我们正忙618呢,哪有空?’需求都理不清,架构师还一个劲催我们上Hadoop集群。呵,想起就好笑。

更崩溃的是,老板急啊。每周例会都灵魂发问:‘中台什么时候能上线?’ 可我们连数据质量问题都没解决完。有次发现订单表里‘支付金额’有百分之二十是负数...你敢信?运营说是历史遗留,没人敢动。这还只是冰山一角。怎么办?硬扛着吧,加班加得我皮肤过敏。老婆说我睡觉都在喊‘维表缓慢变化’。

混乱的数据仓库治理问题示意图混乱的数据仓库治理问题示意图

建到一半我们猛醒——这根本不是技术问题

半年过去,集群跑起来了,第一个数据主题域‘客户画像’勉强出炉。结果?业务方看了一眼:‘这标签不准吧,为啥我高价值客户里一堆测试账号?’ 我头皮发麻。拉上测试组排查,发现源头系统有二十多个测试账号每天模拟下单,跑了三年,数据全混进来了。清洗?对不起,测试组说那是他们压测用的,不能删。僵持了。你看,数据治理不是写代码,是掰手腕。

后来我们发现,每个部门都在护着自己的数据。销售不想交出客户拜访记录,怕透明度高了被考核;财务说部分数据敏感,不能进中台。我们就像在干政治工作——天天开会协调,技术倒成了次要的。那一阵我特别沮丧。有一晚我盯着监控大盘,HDFS存储利用率不到30%,可每天还在烧服务器成本。掐掉?不敢,老板看着呢。

最讽刺的瞬间是:我们花了两月建的数据API,调用量几乎为零。业务方说:‘你们给的指标口径跟我们部门的不一样啊。’ 口径!对,每家对‘活跃用户’定义都不一样,中台给谁看?我们试图统一,结果谁都不服。最后我拍板:先按最通用的口径出,谁有意见谁提需求定制。可这还叫‘中台’吗?我怀疑我们造了个畸形儿。

一场故障把我浇醒——中台不能浮在天上

去年双十一前夜,中台的实时计算链路突然堵了。订单数据像便秘一样出不来,营销那边的短信优惠券全发乱了——该发的没发,不该发的连发了五条。凌晨三点我被电话炸醒,线上翻了车。冲进公司,一排人满头大汗查Flink作业,最后发现是某个维表更新把流给卡死了。恢复后,数据延迟已经造成了十几万损失。

老板没骂我,就说了句:‘这个台子,到底给业务带来了啥?’ 我无言以对。是啊,我们沉迷于架构的优雅,却忘了中台是给业务用的,不是给自己看的。那次之后我们停掉了所有花哨的规划,把团队分到业务线上,蹲点去听他们到底要什么。数据产品如果不能在业务场景里快速验证,就是废铁。 我们开始砍功能——什么标签工厂、算法实验室,统统冻结。先集中精力把供应链的库存数据搞准,因为库存预测直接关系钱。效果,立竿见影。缺货率降了3个点,业务那边终于有笑脸了。

那段时间我也学会了‘耍无赖’:遇到数据源不整改的,我直接拉老板进群,把问题暴露出来,别自己扛。你还别说,权力斗争得拉上权力才有解。中台负责人,得有点‘匪气’。

数据中台实时数仓架构与监控大屏数据中台实时数仓架构与监控大屏

现在,我还信数据中台吗?

要是你问我,我依然认为方向没错,但路径得改。别一上来就想做大而全,那是找死。 我们现在的中台,更像一块块拼图——先从最痛的业务点切入,做出小的数据服务,然后自然生长。比如库存搞顺了,顺带就把采购、物流的数据带通了。现在我们有个小平台,虽然丑,但每天被业务调用几十万次。这才算有点‘中台’的模样。

行业里现在也不咋炒中台概念了,大家务实了很多。我看最近几个分享,都在聊如何量化数据中台的业务价值——这是个好现象。我们公司也在做这个,弄了个‘数据资产化率’的指标,虽然还在摸索。对了,上周我还收到一封感谢邮件,来自供应链的老大,说我们的库存预警帮他避免了上百万的呆滞。那一刻,还真有点小激动。尽管想想前两年踩的坑,还是肉疼。

所以给正在搞数据中台的哥们儿几个土建议:一,别信厂商画的蓝图;二,先把元数据管好,元数据是地基;三,中台必须跟业务KPI绑死,否则就是摆设;四,老板的支持不是用来开会喊口号的,得让他帮你劈开部门墙。

建中台的人,都曾幻想过自己是秩序的建立者。实际上呢,你是垃圾清理工,是吵架王,是消防员。但最后假如真建成了,那种畅快,值得吹一辈子。不过,下次再让我从零干,我可能会先问老板:你究竟有多痛?