数仓大法好!跨境电商 Shopee 的实时数仓之路

微笑、不失礼 提交于 2020-08-13 08:37:31

作者:黄良辉

本文讲述 Flink 在 Shopee 新加坡数据组(Shopee Singapore Data Team)的应用实践,主要内容包括:

  • 实时数仓建设背景
  • Flink 在实时数据数仓建设中结合 Druid、Hive 的应用场景
  • 实时任务监控
  • Streaming SQL 平台化
  • Streaming Job 管理
  • 未来规划优化方向

建设背景

Shopee 是东南亚与台湾领航电商平台,覆盖新加坡、马来西亚、菲律宾、台湾、印度尼西亚、泰国及越南七大市场,同时在中国深圳、上海和香港设立跨境业务办公室。

  • Shopee在2020年第一季的总订单量高达4.298亿,同比增长111.2%。
  • 根据App Annie, Shopee在 2020年第一季强势跻身全球购物类 App下载量前三名。
  • 同时斩获东南亚及台湾市场购物类 App 年度总下载量、平均月活数、安卓使
易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!