大数据大创新：阿里巴巴云上数据中台之道

阿里巴巴云上数据中台正服务着阿里生态中的数十个业务板块、百余家公司、千万级客户，在帮助决策层看清甚至决定业态走向的同时，在上万个业务场景中应用并催生创新。

本书基于作者在阿里巴巴的十年大数据从业经历，精彩演绎云上数据中台之道。全书基于大数据探索的大趋势，讲述阿里巴巴云上数据中台顶层设计，再以实际案例详述阿里巴巴云上数据中台建设及其业务模式的形成过程，总结云上数据中台沉淀的独特价值，并开诚布公地分享阿里巴巴以赋能为本质的大数据战略。

作者希望通过一名老数据人发自肺腑的分享，帮助尽可能多的有志于大数据构建、应用与创新者，构建自己的云上数据中台，从而拥有既“准”且“快”的“全”“统”“通”的智能大数据体系，以驱动各类业务数据化与数据业务化创新！

邓中华，2009年南京大学毕业后加入阿里巴巴。从个性化推荐开始产品之路，到规划并落地生意参谋，再到创造性设计出包括OneData等在内的若干大数据技术及产品体系并推进阿里巴巴数据公共层建设，进而探索DT上云及云上DT赋能阿里生态内外的云上数据中台业务模式，构建并带领团队面向云上用户成功打造出Dataphin、Quick BI等中台产品体系，并面向海内外零售、传媒、农业、环保、地产等行业提供服务；其间，从B2B走进淘系，从阿里生态内联动阿里生态外，矢志不渝于大数据技术及产品领域的平台化及商业化。

l 本书内容全部出自作者十年积累的百余分PPT和数本手稿

l 详细介绍阿里巴巴云上数据中台建设及其中方法论

l 展示了阿里巴巴大数据人用初心和信仰、求变与务实、不懈与努力铸就的云上数据中台及其业务模式

l 代表真正意义上的云上数据中台实战

l 插图精美，阅读体验完美

正说阿里巴巴云上数据中台及云上数据中台业务模式

今天的阿里巴巴，几乎所有业务都运行在大数据之上，几乎所有小二都在用大数据改善工作、进行创新。阿里巴巴云上数据中台正服务着阿里生态中的数十个业务板块、百余家公司、千万级客户，在帮助决策层看清甚至决定业态走向的同时，在上万个业务场景中推进业务数据化、尝试实现数据业务化并催生创新。而这背后则是因为强大的云上数据中台大数据能力的支撑。

阿里巴巴的大数据观

在阿里巴巴，我们有自己的大数据观。我们坚信，“大数据拥有超能力”，大数据所具备的数据计算能力、智能数据能力和数据智能能力，就像人的经络、血液和大脑，缺一不可！围绕着“统一数据建设与数据资产化管理能力”“统一实体连接识别与标签画像高效生产能力”“统一数据服务能力”（在书中分别代称为“OneData”“OneEntity”和“OneService”[1]）三大体系，阿里巴巴实践着云上数据中台，进行着一系列自我命题与自我解题。

阿里巴巴云上数据中台建设之路

从2012 年开始，阿里巴巴云上数据中台建设经历了不断革新理念和实战、不断量变和质变的过程。其中，2014 年4 月至2015 年11 月的阿里巴巴数据公共层建设和2016年9 月正式开始实施的阿里巴巴大数据能力赋能社会战略，是阿里巴巴在大数据领域的两次关键质变。第一次质变确定了阿里巴巴云上数据中台及数据中台团队，第二次质变确定了阿里巴巴云上数据中台业务模式的社会赋能战略。

2014 年，适逢阿里巴巴数据登月元年，首批登月预算数亿元且很快面临耗尽的局面，这引起了时任阿里巴巴CTO 姜鹏（花名三丰）的特别关注，OneData 体系特别是其方法论也因此进入高层管理者的视线。

经过一段时间的方案细化和多轮评审及沟通，2014 年4 月8 日，阿里巴巴数据公共层建设项目正式启动。在保障平稳支持日常业务的前提下，一期启动全局架构，二期启动18 个子项目，三期启动9 个子项目，并启动6 大数据技术领域。一年后，阿里巴巴数据公共层建设项目即取得了阶段性战果，除深度参与的淘系、B2B 等BU 外，涉及或影响小微金服[1]、阿里云等10 多个BU[2]。其数据服务20 多个BU，主打小二端统一的数据产品平台——阿里数据，统一商家端数据产品平台为生意参谋，并推出数据大屏助力双十一，同时深入业务，协助业务创新及探索数据自主创新。与此同时，以阿里巴巴数据公共层建

设为切入点繁荣发展起来的数据构建、管理和服务自成体系，其特别之处在于OneData体系的升级、OneEntity 体系方法论的提出、OneService 体系数据产品的升级。这些不仅在技术上降低成本、提高效率，在业务上验证着数据价值化的可能性，也同时促进了组织优化。此时，阿里巴巴数据中台已经在事实上存在了。2015 年12 月7 日，张勇（花名逍遥子）在给阿里巴巴全体小二的邮件《阿里巴巴集团全面组织升级，启动中台战略》中正式宣布：“构建符合DT 时代的更创新、更灵活的‘大中台小前台’组织机制和业务机制。”自此，数据中台成为阿里巴巴中台事业群的重要组成部分，阿里巴巴数据中台团队正式成立！

在此过程中，阿里巴巴独特的大数据观越来越清晰明确，也累积了独特价值，包括云上数据中台大数据技术、云上数据中台建设方法论、云上数据中台产品化服务、云上数据中台业务体感、OneTeam 协同作战思维、特色大数据人6 大方面。

阿里巴巴云上数据中台业务模式赋能全社会

在阿里巴巴，有一句众所周知的话：“今天最好的表现是明天最低的要求！”数据中台团队的正式成立预示着更高的要求和更多的挑战。与此同时，阿里生态内越来越多的全资或投资子公司提出了数据诉求，既有同时输入数据和消费数据的，也有只消费数据的，还有只输入数据的。于是，从2015 年12 月开始，整个阿里巴巴数据中台团队开始面向阿里生态内建设智能大数据体系！智能大数据体系的建设极大地丰富和完善了阿里巴巴大数据中心，OneData、OneEntity、OneService 渐趋成熟并成为上至CEO、下至一线员

工共识的三大体系，云上数据中台深入业务、赋能业务，也让数据价值及赋能业务的潜在价值越来越被认可和期待。同时，我也深深地反省将其放大到阿里生态内时的不足之处，以及在阿里生态之外，这套大数据能力是否可以推而广之，赋能全社会呢？

于是，2016 年9 月，为了使命，为了达成愿景，我们不再将云上数据中台深藏于阿里生态内，开始将阿里巴巴大数据能力同时赋能阿里生态内外！

历经了阿里生态内各种业态挑剔的实战历练，云上数据中台除自身具备的内核能力外，还向上与“赋能业务前台”连接、向下与“统一计算后台”连接，并与之融为一体，形成云上数据中台业务模式，具备了对全社会赋能的可能。关于云上数据中台与云上数据中台业务模式的关系。

云上数据中台定位于计算后台和业务前台之间，其内核能力是以业务视角而非纯技术视角，智能化构建数据、管理数据资产并提供数据调用、数据监控、数据分析与数据展现等多种服务；承技术启业务，是建设智能数据和催生数据智能的引擎。而指导云上数据中台内核能力不断积累和沉淀的正是OneDataOneEntity、OneService 三大体系的方法论。

以云上数据中台自身内核能力为中坚力量的云上数据中台业务模式，同时关注着与大数据能力相关的技术、数据、业务等，其基于技术而又深入业务，是包括数据产品+ 数据技术+ 方法论+ 场景价值实现等在内的综合性能力输出。它为智能化数据、极致提升技术和数据智能化业务负责，即，一方面专注于从业务视角建设既“准”且“快”的“全”“统”“通”的智能大数据体系，并且极致化追求技术上的降低成本及提高效率，另一方面致力于智能大数据与业务场景深度融合中的各类应用与智能化价值创新。

我们的追求与努力

为何而来？将往何处？这是我们一直思考的问题！

云上数据中台业务模式是活性的，是有血有肉、有情感的，其信念是“大数据拥有超能力”，其使命是“让大数据催生大创新”，其愿景是实现 “大数据创新无处不在，大数据人才无处不在”。所以，未来，我们将全力以赴地分享云上数据中台业务模式，不遗余力地将云上数据中台业务模式中的方法论、数据产品、数据技术、数据与业务融合的价值化经验等付诸帮助国内、国际的云上客户的实战中！希望可以有越来越多的志同道合者一起“华山论剑”！

从2016 年9 月开始，我们结合一些客户的实际诉求，分享了不少大数据领域相关经验，而本书则是应多方期望，对于阿里巴巴云上数据中台及云上数据中台业务模式的系统、全面、深入的分享。后续，我们计划推出《阿里巴巴云上数据中台的赋能实战》《大数据产品经理》《大数据大设计》《深入大数据产品与技术》《大数据大管理》等一系列大数据相关图书。对于分享，我们是认真的！

邓中华（花名 宗华）

阿里巴巴大数据人，资深产品专家

特别说明，特别感谢

本书所有内容均基于笔者十年来在阿里巴巴大数据领域实战中的亲身经历，所有图片均来自于笔者的100 余篇PPT 和数本手稿，以及笔者所在阿里巴巴数据中台团队的战友积累的20 余篇PPT。所以，这本书代表着真正意义上的云上数据中台实战。十年寒来暑往，十年风刀霜剑，相信读者可以从中或多或少感受到阿里巴巴大数据人用初心和信仰、求变与务实、不懈与努力铸就的云上数据中台及其业务模式！

特别感谢相信我、支持我、陪伴我一起战斗的阿里巴巴数据公共层建设若干期项目中的数百名伙伴、生意参谋平台中的80 名队友、新能源实验室与新行业赋能团队的120 名热血同仁！书中图片中引用的部分图标来自iconfont 平台，在此一并感谢！因人数众多，在此不一一列出姓名。

谨以此书，献给这么多年来不离不弃陪我奔跑在大数据之路上的梦想战友！献给一直包容我、疼惜我并且支持我投身大数据事业的家人！献给在本书成书过程中无欲无求给予我帮助的好友！

生命因为有你们而美好，征程因为有你们而无悔，因为相信，所以坚持，终于看见！

第1章 笔者自述 001

1.1 我的阿里九年：相信一切都是最好的安排 002

1.2 我眼中的阿里：有情有义，有梦想，有担当 005

第2章 阿里巴巴云上数据中台之顶层设计 007

2.1 大数据的发展历程与价值探索 008

2.1.1 国内外大数据发展研究 008

2.1.2 同仁如何用大数据 013

2.2 阿里巴巴的大数据主张 017

2.2.1 阿里巴巴的大数据主张概述 017

2.2.2 大数据催生大创新 018

2.2.3 大数据拥有超能力 019

2.2.4 云上数据中台是“承技术启业务”的关键存在 021

2.3 水到渠成的云上数据中台 022

2.3.1 云上数据中台赋能业务全景图 023

2.3.2 云上数据中台的顶层设计 025

2.3.3 云上数据中台业务模式的愿景与使命 031

第3章 阿里巴巴云上数据中台之建设过程 035

3.1 云上数据中台执行计划 036

3.1.1 现状梳理和未来展望 036

3.1.2 项目计划与组织协同 041

3.1.3 实际落地与项目总结 048

3.2 从零散的数据到统一的数据 062

3.2.1 烟囱式开发造成业务困扰和技术浪费 062

3.2.2 数据公共层力求让业务和技术都满意 067

3.3 从成本中心到资产中心 083

3.3.1 大数据容易陷入成本中心的深渊 083

3.3.2 大数据应该且必须回归资产本质 086

3.4 从孤岛数据到融通的数据 097

3.4.1 孤岛数据存在的必然性 098

3.4.2 数据只有融通才能真正产生价值 099

3.5 从“授人以鱼”到“授人以渔” 106

3.5.1 给数式服务——授人以鱼 106

3.5.2 业务主题式服务——授人以渔 107

3.6 从“数据可有可无”到“无数据不智能” 109

3.6.1 野蛮增长时期：数据是可有可无的 109

3.6.2 智能化增长时期：无数据则不智能 111

3.6.3 大数据引爆“双十一全球盛典” 120

第4章 阿里巴巴云上数据中台业务模式之独特价值 141

4.1 云上数据中台业务模式的独特价值 142

4.2 云上数据中台大数据技术 144

4.3 云上数据中台建设方法论 146

4.4 云上数据中台产品化服务 149

4.4.1 云上数据中台产品化服务概览 150

4.4.2 云上数据中台核心产品Dataphin 151

4.4.3 云上数据中台核心产品Quick BI 154

4.5 业务体感 156

4.6 OneTeam 协作作战思维 157

4.7 特色大数据人 158

第5章 走向大数据成功之路

5.1 如果可以选择，你会走怎样的大数据之路 162

5.2 阿里巴巴以赋能为本质的大数据战略 163

5.2.1 基于云上数据中台业务模式的解决方案 163

5.2.2 阿里巴巴真正在意的和能够给予的 166

5.2.3 循序渐进的云上数据中台业务模式 166

5.3 你的成功依赖于你的远见和执行力 168

后记 一位老数据人的心路与情怀 169

附录A 云上数据中台演进格局选图 179

A.1 笔者见证的阿里巴巴大数据团队演进 180

A.2 一张图说尽云上数据中台顶层设计演进 181

A.3 阿里巴巴云上数据中台的成长历程 182

A.4 阿里巴巴云上数据中台赋能业务运行图 186

A.5 阿里巴巴云上数据中台赋能业务全景图 187

附录B 云上数据中台核心产品选图 189

B.1 阿里巴巴云上数据中台核心产品Dataphin 图示 190

B.2 阿里巴巴云上数据中台核心产品Quick BI图示 194

附录C 插图索引 199