阿里巴巴云上数据中台之道-第一章、第二章

第一章 笔者自序

笔者介绍自己从入职阿里巴巴后的工作

• 2009年：初识数据-被其他部门认为数据就是做报表
• 2009年~2011年：的工作状态为

image.png

• 2012年2月份：接到统一370个API的工作，提出必须优先对背后数据实现标准化和规范化的建议，得到支持
• 2012年6月份：
  • 数据标准和规范：onedata
  • 统一服务：opneAPI（oneservice前身）
  • 深入服务：傻瓜平台、生意参谋
• 2013年4月 ：进行淘宝天猫数据公共层
• 2014年 ： onedata 引起高层关注
• 2014年4月 ：阿里巴巴数据公共层建设项目启动
  • 一期：全局架构
  • 二期：18个子项目
  • 三期：9个子项目，6大技术领域
• 2015年：阿里巴巴数据公共层取得阶段性成果
• 2015年12月7日：数据中台团队成立

第二章 云上数据中台之顶层设计

2.1.1 国内外大数据发展

• 本章作者先介绍了国内外大数据发展

2.1.2 如何利用大数据

• 简单举例了几个大数据应用场景，如
  • 基础建设方面的：
    • 预测-景点拥挤程度，
    • 化零为整-小额投资借贷
  • 机制方面的：
    • 用输入规划输出的-拼车路线
    • 代替人工的-图像识别，题库
  • 思维方面的：
    • 用户画像-DMP
    • 对象评估-用户评分
  • 场景虚拟技术方面的：
    • VR
    • 无人自助服务

2.2 阿里巴巴大数据主张

• 坚信大数据有超能力
• 简单介绍三one体系
  • oneData：统一数据
  • oneEntity：统一实体
  • oneService：统一服务

2.3 如何实现云上数据中台

image.png

• dwd&dws 不因业务、及组织架构变动而轻易变动
• 萃取中心 统计指标的精华数据，行为标签、关系等
• 萃取中心举例 消费者数据体系、企业数据体系、商品数据体系、位置数据体系

第三章 数据中台建设过程

3.1 执行计划

3.1.1 现状及设想

• 现状略
• 设想
  • ODS单一团队负责，其他团队无权复制
  • DWD+DWS由统一团队负责抽象，核心业务必须有单一团队负责
  • ADS由业务团队或深入业务的数据团队负责自由建设