QCon-菜鸟数据中台技术演进之路_陈飞-2019.10-26页_14mb

菜鸟数据中台技术演进之路总结

核心内容

菜鸟数据中台是阿里巴巴集团在物流业务中构建的数据平台，旨在通过统一的数据管理和服务，提升数据使用效率，支撑业务创新与数字化运营。其核心内容包括数据运营、数据服务、数据管理、智能推送等模块，围绕“数据 + 服务 + 解决方案 + 中台团队”（CBD）构建了一套完整的技术体系。

主要观点

• 数据中台的本质：中台是一种经营理念，也是一种组织形式，是“平台思维”的自然演进，其目标是降低创新成本，提升效率，沉淀数据资产。
• 菜鸟数据中台的定位：与阿里数据中台不同，菜鸟数据中台更侧重于业务场景的落地与数据服务的直接应用，强调“数据 + 服务 + 解决方案 + 中台团队”的融合。
• 技术演进路径：菜鸟数据中台经历了从数据平台到数据中台的转变，逐步构建了数据运营、数据服务、数据管理、智能推送等技术套件，实现了从数据采集、处理、服务到应用的闭环。
• 2D原则：菜鸟数据中台在技术架构设计上遵循“数据驱动”（Data-Driven）和“平台化”（Platform）的2D原则，强调数据的统一管理与服务的灵活调用。

关键信息

数据中台概述

• 数据中台的定义：数据中台是企业数据资源的整合平台，提供统一的数据服务，支持前台业务快速迭代。
• 菜鸟数据中台的背景：菜鸟作为阿里巴巴的生态协同平台，需要统一的数据平台来支撑多业务线的协同运营。
• 菜鸟数据中台的目标：提升数据使用效率，推动数据资产沉淀，赋能业务创新与数字化运营。

技术演进篇

• 整体架构：菜鸟数据中台由前台业务、数据中台、基础平台三部分组成，实现了数据从采集、处理到服务的全链路管理。
• 数据运营套件：
  • 支持国内供应链、国际进口、国际出口、快递消费者等多业务线的数据站点搭建。
  • 提供数据看板、数据仓库、可视化编辑器、渲染引擎等工具，支持多终端（PC、移动端）的数据展示。
  • 包含权限体系、账号体系、数据服务等模块，确保数据安全与高效调用。
• 数据服务套件：
  • 实现了分钟级服务配置，支持SQL与NoSQL数据源的灵活接入。
  • 支持跨源Join，实现数据的高效整合。
  • 提供本地模式与单元化部署，适应不同业务场景。
• 数据管理套件：
  • 强调数据安全，包括访问控制、内网权限、外部权限等。
  • 支持数据追踪，确保数据使用可审计、可追溯。
  • 提供指标口径统一管理，提升数据质量与一致性。
• 智能推送套件：
  • 实现了“人找数”与“数找人”的双向推送机制。
  • 通过智能取数与数据加速技术，提升数据调用效率与服务质量。

场景篇

• 移动数据运营：菜鸟数据中台支持移动端数据运营，包括数据大屏、移动看板、指标看板等，满足移动办公与实时决策需求。
• 应用场景：通过数据运营套件、数据服务套件等，菜鸟数据中台在多个业务场景中实现数据驱动的业务创新，如网络规划、供应链优化、消费者行为分析等。

小结

菜鸟数据中台通过技术演进与场景落地，构建了统一的数据平台，实现了数据资产的沉淀与高效利用。其技术建设以“数据驱动”与“平台化”为核心，涵盖数据运营、数据服务、数据管理、智能推送等多个方面，支持多业务线的协同运营与数字化转型。未来，菜鸟数据中台将继续围绕数据价值的释放与业务创新，推动数据技术的深度应用。