Tag Archives: 数据中台

数据中台的终局是将数据变现

如何真正理解数据中台?只有大厂才需要考虑数据中台吗?数据中台的出现会给企业现有的战略、业务、技术带来哪些挑战?

与其讨论什么是数据中台,泛零售企业对「如何利用数据中台解决业务问题并带来盈利」更感兴趣。因此,如何利用好数据中台成为新的增长引擎,正成为一门新课题。在实践过程中,我们发现很多泛零售企业不清楚如何真正用数据中台有效解决业务问题,想要盈利也变得愈加困难。

9月9日「数智·泛零售」03课,地雷老师的分享中提出了建议,在实施数据中台前,泛零售企业必须梳理3个问题:

1、数据中台在泛零售行业中是成本中心,那老板为什么要斥巨资投资做数据中台呢?

2、数据中台落地的每一步,能带来哪些业务收益?上数据中台不同于上ERP、CRM及内部管理系统,数据中台是非常底层,刚开始业务部门感受不到它的存在,需要老板有战略决心。

3、设想中的数据应用,涉及到哪些现有系统和数据?

从以上3个问题总结,其实需要从战略、业务、技术实现三个层面去考虑。

如果你是一位有着多年数据中台建设的老手,看到某些指标,可能你就可以感受到项目实施的成功率。比如说业务部门比IT部门着急,催着IT部门上线,那就对了。意味着有了清晰的战略和业务出口,最忌讳的是先做数据中台,将数据汇集并存起来,未来再进行数据挖掘及变现。

数据中台VS传统数仓

40年前就出现的数据仓库概念和今天盛行的数据中台有何差别?尤其在技术上又有什么差异性呢?我们听到最多的可能是以下这两种回答:

1、是IOE为代表的传统技术栈,转向Hadoop等开源大数据技术。

2、增加了类似离线计算/实时计算/数据资产/数据API这样的功能模块。

再仔细想想,仅仅是技术因素吗?技术当然会更新迭代,数据中台在技术上比传统的数仓在处理的数据量上大大提高,如果仅仅考虑至此,当被问到老的技术撑不住新的业务了吗?在传统的线下零售情形下Oracle就搞不定吗?这些问题是可能是矛盾的。

我们认为数据中台是业务概念,而非技术概念。相比传统数仓,数据中台离业务更近,能更快的响应业务和应用开发的需求。数据中台的首要出发点并不是数据,而是业务,帮企业解决业务问题,让企业的业务效率更高。

大数据时代,数据是一种「石油」,直白地讲,数据经过汇聚、生产、服务,是可以给企业赚钱的,也是所有业务的出发点。


数据中台的终局是什么?是将数据变现,让数据本身「生钱」。

同时,这也是数据中台兴起的初心,和传统的数仓不同在于,传统的逻辑上,这些都是成本中心,但数据中台是一门新的生意,将数据攒下来进行生产并变现。

意味着数据中台项目在一开始就要奔着生产数据中台产品并且能卖钱进行建设,这也是上一代和这一代在业务上最本质的区别。 如果实施几期之后,开始规划计量计费功能,那么就对了!因为正在朝着对外服务并进行收费的方向进行。 在划分数据中台的功能模块时,一种典型的思路,采用典型数据开发的技术导向,一级信息架构类似这样:离线计算/实时计算/数据资产/数据API……

不以技术划分,而是以数据生产的场景划分。如果开始按照数据开发、数据运维、数据服务、数据资产等岗位场景组织产品功能,事情就对了。

泛零售业务的技术挑战

一般泛零售企业没有阿里双11那样的场景,应将重点应放在哪里?产品形态又如何?

泛零售企业都是线上线下协同的,既有线下场景,又有线上场景,数据来源也极其庞杂。泛零售企业数据用的时候实际场景也是混杂的,需要跨域协同。

对数据治理来说,一方数据、二方数据、三方数据的依次处理,与业务都有强关系。光有数据而不能赋能业务的,都只能算是半吊子。

未来所有的企业核心都会变成加工数据的企业,虽然泛零售行业数智化转型不一定保证成功,但不做数智化未来注定失败。

当泛零售企业发现:数据问题导致变现出现困难时,就是该上数据中台的时候了。数据主动向业务前端靠近,这也是DT时代数据变现的发展大趋势。

地雷赌了两件事

“凤衔金榜出云来,平地一声雷。”

18年数据老将地雷(花名),2020年5月加入奇点云,任技术总监。

5月11日,他在博客里写道:这一次在赌两件事

“至暗时刻”

今年年初,那正是国内疫情最严重的时候,地雷做了一个大胆的决定:离开AI独角兽企业,去一家服务泛零售行业的创业公司。

彼时,许多线下零售企业无法开张,经营受到重挫,其数字化转型预算大幅削减,服务它们的创业公司必然受到影响。不少人劝他不要“想不开”。在众多劝他的人里,甚至包括认识多年的老友行在。

作为奇点云的创始人兼CEO,行在非常希望地雷加入,但作为朋友,他又忍不住多劝几句:“你现在有一笔股票,公司还即将上市,前途无量。而我们仍在战斗,现在还是‘至暗时刻’。”

“老张当时特别严肃。我和老张认识八年了,他一直是这样的人,非常坦诚。”地雷说,选择一家公司,要看这家公司做的“事”,更要看他们的“人”。

“其实创业这么多年,我也经历过至暗时刻,我知道扛过这段时期就能变得很好。结果我2月下定决心,5月入职,甚至都没赶上‘至暗时刻’。”2020年刚过半,奇点云实现了连续2个季度盈利,成为黑天鹅阴翳下的一道奇迹。

“水到渠成”

加入奇点云之前,地雷已和大数据、人工智能打了18年交道。

2003年至2011年,他在中科院计算所担任pFind蛋白组学搜索引擎架构师。

2012年,地雷加入阿里云,作为阿里大数据底层核心引擎ODPS的初代产品经理之一,负责ODPS的算法模块和对外开放。地雷和行在的“孽缘”正从那时开始——行在恰好是阿里数据中台的发起人之一。

注1:ODPS由阿里自主研发,是阿里数据交换平台(DXP)的底层基础设施,支撑着阿里金融、淘宝指数、数据魔方等关键业务。

注2:ODPS团队是当时阿里“平均级别最高、平均工资最高且没有之一”的团队,汇聚了阿里最高密度的精英人才。用地雷的话说,“十项全能的人”数不胜数。

打好技术基础后,次年,ODPS启动了与上层业务团队的合作,支撑阿里内部各项业务的开展。打个比方,地雷参与了ODPS支持蚂蚁金服金融风控领域的多种应用,其中包括现在人手一个、动态变化的芝麻信用评分;又如,强力加持菜鸟,搭建了菜鸟第一代物流预测算法

地雷,2013年,@阿里,杭州

从攻关底层核心引擎技术,到技术支撑内部业务,终于,2014年阿里云决定把整个ODPS对外开放,将大数据底层核心能力赋能给社会。这也是地雷在阿里云最为自豪的战果——开放前夕他在博客里写道:“从进阿里第一天起,我就只盯着ODPS对外开放这一件事,终于快等到了!”


 2014年底,完成ODPS与电商、游戏、医疗、智能穿戴等企业的对接和应用后,地雷离开阿里云,走上创业路,在聚道科技任GeneDock基因大数据平台CTO。医疗是一个专业的领域,需要沉下心深入积累。2018年,聚道科技完成B轮融资,创造了该领域融资额/团队规模的记录。次年,地雷加入云从科技,担任人机协同中台系统的产品总监。 2020年,疫情重击,很多行业都处于“至暗时刻”,地雷南下,加入奇点云。这一年,中国的大多数企业都已经站在了数智化转型的十字路口。无论是做什么的企业,现在都需要把数据当作核心问题去认真对待。“走量”已无法带来下一阶段的成功,必须借助数据去“精耕细作”。而数据中台正是企业进入DT时代、应对未知风险的重要基础设施。地雷认为,现在中台模式最早源于互联网公司。但是对于线下传统企业的场景,产品必须有所创新,“我们当年在阿里面临很多实际问题,原有的思路搞不定,不得不创新,后来有人给这套打法起了一个名字叫中台。今天线下商业面对的场景更复杂、数据更分散,一定需要更多创新,而不是生搬老套路。”因此,地雷非常认同AI这个方向:其一,AIoT是线下数据的重要入口与出口,不仅要为企业解决数据怎么用的问题,还要解决线下场景没有数据的问题;其二,要借助人工智能,让机器完成机器能做的事情,释放人去做更有创造力的事情。 “奇点云所创导的‘AI驱动的数据中台’,和我对数据中台的理想认知完全相符。”回顾走过的路,地雷说,“现在可以说是自然而然来到了最适合我的地方,水到渠成。”

地雷的生活日常

“长期主义”

此番地雷加入奇点云,担当数据中台产品(奇点DataSimba)的大任,他的思路很清晰——“长期主义”。数据中台这一行,无论是客户还是服务商,都应该意识到它是需要长期坚持的一件事儿。对于客户来说,“数据中台是进行时”,它不是部署一个产品就结束的,数智化转型的路很长,还有很多数据智能的机会值得去探索、深化和应用。对于服务商自己来说,选择了数据中台这条赛道,就意味着选择了一场“长线战役”。地雷认为做数据中台产品,首先,技术是平台侧的,对平台侧的投资都很难,要花时间去打磨,当然一旦做出来了,竞争对手也很难抄走;另一方面,做数据中台要舍得扎根行业,要耐得住性子去打透行业、沉淀行业know-how,才能保证在底下打“地基”的技术团队不会走错方向。在地雷看来,一个真正长远的数据中台公司一定会按照这个方式去布阵,而当他发现“奇点云作为一家创业公司,有行业专家团队,甚至还有专业的、收费的咨询团队”,“这样丰富层次的配置”让他一下子有了带技术研发团队的安心感和信心。“如果是为了去追数据中台的风口,不舍得坚持投入,绝对不会成功。”地雷谈到,“所以(做数据中台)很挑老板,老板是不是认同这是一个长线战役,并能持续投入——哪怕在低潮的时候,也要持续投入,克服最难点。之前在阿里合作直到现在,确认过眼神,行在是对的人。”


“正确的路”

如何赢得竞争?地雷认为做“龟兔赛跑”的乌龟就可以了。但他强调,除了勤奋,乌龟成功的一个关键前提是:乌龟一定要跑在正确的路上,没有瞎绕。地雷从3个维度规划“正确的路”:产品管理、工程管理和团队管理。

产品管理

数据中台研发和创造单个应用相比,难度要高一个数量级。架构上,必须设计一套干净强大、可拓展、安全、完整自洽的API,并在此基础上构建SDK、Console、GUI和编程工具链。即使是计算机系科班出身的程序员,90%也不清楚DSL编译器和IDE的实现原理。产品上,需要抽象和分解能力。不仅仅满足某个具体用户场景,而是必须把握各种应用开发者在各阶段遇到的各种问题。除了用户体验,还得注意统一的概念体系、设计哲学和必要的分寸感。因此,研发ToB平台型产品,必须规划好产品架构和路线图,不能无脑乱闯。产品经理该做的功课:战略分解、市场分析、客户访谈、竞品调研、用户体验走廊测试、“吃狗粮”……一项都别想偷懒。地雷说,他见过太多失败的团队,产品负责人放弃了谨慎的思考和周密的设计,就知道逼着团队拼命加班,然后指望靠蛮力一遍遍推倒重构。“这是用战术上的勤勉掩盖战略上的懒惰。”地雷举了华为的例子。华为之所以这么厉害,一个重要原因是华为特别重视产品规划,市场调研、需求分析很扎实,路标选点非常准。一旦有了路线图,华为往往会投入竞争对手三倍的研发力量,确保压倒性优势。(这也意味着,和对手同等资源下,另有2个“还不错”的方向被“战略性放弃”了,保证了“特别对的”战役有“范弗里特弹药量”)。经过产品经理团队周密而繁琐的工作,DataSimba的路线图目前已经规划到了27周以后,并在业务重点、关键概念和架构体系上,和销售团队、架构师达成了一致。

工程管理

好的软件工程实践,决定了技术团队的层次。需求的管理和分解是否专业、版本管理用得如何、Bug管理怎么样、代码审核是否严格、发布升级是否自动化、有没有单元和集成测试、迭代是否建立了节奏感……地雷说,到一个技术团队里呆几个小时,鼻子闻一闻,就知道几斤几两。技术团队如果这些基本功不好,摩擦力会越来越大。


“我用SAFe(Scaled Agile Framework,大型敏捷软件工程方法论)带项目,”地雷介绍,“它可能是唯一适合底层中台开发的管理方式。”
*注:SAFe,国际上最流行的规模化敏捷方法之一,将敏捷实践从团队级有效扩展至项目群级乃至企业级。底层核心平台(数据平台)的技术管理方法论不同于应用软件型产品:常规意义上的敏捷软件开发,团队不会超过20人,有时leader带着向前猛冲就能做出成果。而大型平台可能有上百人的技术团队,如何让上百人协同起来,同时保证整体迭代的节奏感,就需要专门的管理思路。微软的Windows团队、亚马逊的AWS团队、Apple的系统平台团队,都采用SAFe的方法论,阿里的ODPS团队亦是如此。18年走来,地雷对平台型团队的软件工程管理非常熟悉。这最早得益于在ODPS的战斗,在后期的创业实践中经历了多次检验,现在,他把这套方法论也带到了奇点云。

团队管理

来到奇点云,地雷定下了两个“小目标”:一,短期内,要把数据中台这个产品做得足够好;二,长期,打造一个精英研发团队,每一位成员都要有“端到端”的意识和能力(例如程序员,需要在“理解需求”和“测试”这两侧都很强)。地雷不认为团队管理有什么武功秘籍,反而常常都是一些繁琐的“体力活”,例如:每天早上站立晨会;每2个月做一次全团队One on One,给每个人辅导OKR(Objectives and Key Results,目标与关键成果);每个项目都做复盘;每次事故都做Post-Mortem(故障回顾);每个版本结束,都举行发布会、“吃狗粮”和黑客马拉松;建立起技术面试的规范和流程;建立新人入职手册和导师制度;把不合格的家伙干脆利索开掉……总之,让跟着你的人觉得有成长,不敢懈怠。建立团队信任,让团队里的聪明人超越“办公室政治”,互相合作取得双赢。这一点上,地雷很认同CEO行在挂在嘴边的那一句:“管理者需要脑力、体力和心力”。把团队当作产品去打造,看到团队成员们发展成为很精英、很职业的工程师或产品经理,是地雷做管理者的幸福感来源。

地雷(右一)和团队同学

6月,杭州入梅,南方的雨淅淅沥沥,落在梦想小镇创业大街23幢仿古的屋檐上。回想起冬去春来的那段时光,北京还没停止供应暖气,许多人问地雷:为什么要在疫情最严重的时候离开AI独角兽,去一个服务泛零售行业的小型创业公司?地雷终于在他的博客写下了回答:“这一次在赌两件事:第一、中国零售行业会很快恢复;第二、奇点云能够快速达到盈亏平衡、下一轮融资成功、杀出红海。我们来一起看看,接下来会发生什么事。”很高兴,这两件事我们一起赌对了。

地 雷 团 队招 兵 买 马

或许你对低调的地雷和他麾下团队产生了亿点点兴趣;或许你就是兼顾“理解需求”和“测试”两侧、“端到端”做事的王牌程序员;或许你已经参透PD不能只坐镇后方的道理,领头冲锋,为身后的兄弟们探路搭桥;或许你还未C位出道,但吃得苦中苦,学海无涯乐作舟;……那或许,你挺适合奇点云技术团队。


产品经理、后端工程师、架构师、测试经理等岗位火热招聘中,立即投递简历至邮箱:hr@startdt.com或点击阅读原文,直达招聘主页。各位“工兵”,速来“扫雷”!