大数据大创新：阿里巴巴云上数据中台之道

阿里巴巴云上数据中台正服务着阿里生态中的数十个业务板块、百余家公司、千万级客户，在帮助决策层看清甚至决定业态走向的同时，在上万个业务场景中应用并催生创新。

本书基于作者在阿里巴巴的十年大数据从业经历，精彩演绎云上数据中台之道。全书基于大数据探索的大趋势，讲述阿里巴巴云上数据中台顶层设计，再以实际案例详述阿里巴巴云上数据中台建设及其业务模式的形成过程，总结云上数据中台沉淀的独特价值，并开诚布公地分享阿里巴巴以赋能为本质的大数据战略。

作者希望通过一名老数据人发自肺腑的分享，帮助尽可能多的有志于大数据构建、应用与创新者，构建自己的云上数据中台，从而拥有既“准”且“快”的“全”“统”“通”的智能大数据体系，以驱动各类业务数据化与数据业务化创新！

邓中华，2009年南京大学毕业后加入阿里巴巴。从个性化推荐开始产品之路，到规划并落地生意参谋，再到创造性设计出包括OneData等在内的若干大数据技术及产品体系并推进阿里巴巴数据公共层建设，进而探索DT上云及云上DT赋能阿里生态内外的云上数据中台业务模式，构建并带领团队面向云上用户成功打造出Dataphin、Quick BI等中台产品体系，并面向海内外零售、传媒、农业、环保、地产等行业提供服务；其间，从B2B走进淘系，从阿里生态内联动阿里生态外，矢志不渝于大数据技术及产品领域的平台化及商业化。

第1章  笔者自述  001

1.1 我的阿里九年：相信一切都是最好的安排  002

1.2 我眼中的阿里：有情有义，有梦想，有担当  005

第2章  阿里巴巴云上数据中台之顶层设计  007

2.1 大数据的发展历程与价值探索  008

2.1.1 国内外大数据发展研究  008

2.1.2 同仁如何用大数据  013

2.2 阿里巴巴的大数据主张  017

2.2.1 阿里巴巴的大数据主张概述  017

2.2.2 大数据催生大创新  018

2.2.3 大数据拥有超能力  019

2.2.4 云上数据中台是“承技术启业务”的关键存在  021

2.3 水到渠成的云上数据中台  022

2.3.1 云上数据中台赋能业务全景图  023

2.3.2 云上数据中台的顶层设计  025

2.3.3 云上数据中台业务模式的愿景与使命  031

第3章  阿里巴巴云上数据中台之建设过程  035

3.1 云上数据中台执行计划  036

3.1.1 现状梳理和未来展望  036

3.1.2 项目计划与组织协同  041

3.1.3 实际落地与项目总结  048

3.2 从零散的数据到统一的数据  062

3.2.1 烟囱式开发造成业务困扰和技术浪费  062

3.2.2 数据公共层力求让业务和技术都满意  067

3.3 从成本中心到资产中心  083

3.3.1 大数据容易陷入成本中心的深渊  083

3.3.2 大数据应该且必须回归资产本质  086

3.4 从孤岛数据到融通的数据  097

3.4.1 孤岛数据存在的必然性  098

3.4.2 数据只有融通才能真正产生价值  099

3.5 从“授人以鱼”到“授人以渔”  106

3.5.1 给数式服务——授人以鱼  106

3.5.2 业务主题式服务——授人以渔  107

3.6 从“数据可有可无”到“无数据不智能”  109

3.6.1 野蛮增长时期：数据是可有可无的  109

3.6.2 智能化增长时期：无数据则不智能  111

3.6.3 大数据引爆“双十一全球盛典”  120

第4章  阿里巴巴云上数据中台业务模式之独特价值  141

4.1 云上数据中台业务模式的独特价值  142

4.2 云上数据中台大数据技术  144

4.3 云上数据中台建设方法论  146

4.4 云上数据中台产品化服务  149

4.4.1 云上数据中台产品化服务概览  150

4.4.2 云上数据中台核心产品Dataphin  151

4.4.3 云上数据中台核心产品Quick BI  154

4.5 业务体感  156

4.6 OneTeam 协作作战思维  157

4.7 特色大数据人  158

第5章  走向大数据成功之路

5.1 如果可以选择，你会走怎样的大数据之路  162

5.2 阿里巴巴以赋能为本质的大数据战略  163

5.2.1 基于云上数据中台业务模式的解决方案  163

5.2.2 阿里巴巴真正在意的和能够给予的  166

5.2.3 循序渐进的云上数据中台业务模式  166

5.3 你的成功依赖于你的远见和执行力  168

后记  一位老数据人的心路与情怀  169

附录A  云上数据中台演进格局选图  179

A.1 笔者见证的阿里巴巴大数据团队演进  180

A.2 一张图说尽云上数据中台顶层设计演进  181

A.3 阿里巴巴云上数据中台的成长历程  182

A.4 阿里巴巴云上数据中台赋能业务运行图  186

A.5 阿里巴巴云上数据中台赋能业务全景图  187

附录B  云上数据中台核心产品选图  189

B.1 阿里巴巴云上数据中台核心产品Dataphin 图示  190

B.2 阿里巴巴云上数据中台核心产品Quick BI图示  194

附录C  插图索引  199

推荐序

从大数据的概念被正式提出，到马云老师预言人类正从IT 时代走向DT 时代，大数据浪潮迭起。大数据同仁共同认知的一点是，大数据会对社会创新、产业变革、业务创新及每个人的角色定位产生近乎决定性的影响。

马云老师早在2014 年就提出了业务数据化和数据业务化，阿里巴巴因此付诸行动，通过全局数据监控、数据化运营、数据植入业务场景的各个链路等推进业务数据化；通过统一商家端数据产品、计量信用分，以及风险预测与防控等，推进数据业务化。但与此同时，我们也清楚地知道，在实现这个愿景的道路上存在着很多挑战，其中，如何提升大数据能力则是关键。

在2014 年以前的阿里巴巴，我们的计算资源分散各处，我们的数据指标经常相互冲突，我们的数据应用大多从数据源头向上耗费大量资源进行垂直开发。这种状况无法可持续地推进业务数据化与数据业务化。于是，阿里巴巴数据人协同起来，从业务视角而非纯技术视角出发，建设既“准”且“快”的“全”“统”“通”的智能大数据体系。其间，在极致追求技术提升的同时，我们自成OneData、OneEntity、OneService 三大体系，开发了致力于智能数据构建与管理的Dataphin、高效数据分析与展现的Quick BI 等产品，培育了一大批独具阿里特色的大数据人才，云上数据中台的建设也就水到渠成了。

今天的阿里巴巴，几乎所有的业务都运行在大数据之上，几乎所有的小二都在用大数据改善工作甚至创新。云上数据中台正服务着阿里生态中的数十个业务板块、百余家公司、千万级客户，在上万个业务场景中应用并催生创新。而每一年的双十一都在上演着数据奇迹。

以2016 年的双十一为例，当天实时计算处理的数据量达到9400 万条/ 秒，面向业务系统提供应用服务的单日数据调用约百亿次，而全链路完成数据采集、整合构建、服务展现仅需2.5 秒，这些惊人的数字背后是因为有强大的云上数据中台大数据能力在支撑。

如今，中国正处于数字化转型阶段，政府的各个部门及各行各业越来越相信大数据的力量。我们认为，这套在阿里生态内实战过的云上数据中台大数据能力及其推进业务数据化、数据业务化的云上数据中台业务模式，可以在阿里生态之外推而广之，赋能全社会！

2016 年9 月，我们不再将云上数据中台深藏于阿里生态内，开始以亲身经历的各种积淀对社会各界有志于大数据战略者伸出合作之手，帮助诸如零售、旅游、环保、地产、传媒、运营商、文教、政府部门等领域的客户构建自己的大数据能力，并在数字化转型之路上逐步走向成功！

一群有情有义、有梦想、有担当又有极强战斗力的人共同缔造了今天的阿里巴巴。但如何驱动大数据让世界更加美好呢？我们希望携手同道者，共创、开拓，进而修炼大数据能力，共同在大数据实践之路上走向成功！大数据能力本应无边界，越多地参与，才越有可能真正实现无边界。

永不停歇地奋斗，正因乐在于志！我们坚信，一切美好，都会因此开始的刚刚好！

胡晓明( 花名 孙权)

阿里巴巴合伙人，阿里云总裁

页　　数：216

开　　本：16