小米流式平台架构演进与实践

小米业务线众多，从信息流，电商，广告到金融等覆盖了众多领域，小米流式平台为小米集团各业务提供一体化的流式数据解决方案，主要包括数据采集，数据集成和流式计算三个模块。目前每天数据量达到 1.2 万亿条，实时同步任务 1.5 万，实时计算的数据 1 万亿条。

伴随着小米业务的发展，流式平台也经历三次大升级改造，满足了众多业务的各种需求。最新的一次迭代基于 Apache Flink，对于流式平台内部模块进行了彻底的重构，同时小米各业务也在由 Spark Streaming 逐步切换到 Flink。




小米流式平台如何发展的？如何实现基于 Flink 的实时数仓？

可下载文档：
小米流式平台架构演进与实践.pdf (1.3 MB, 下载次数: 2)

2020-5-6 17:54 上传

点击文件名下载附件

原文链接：https://mp.weixin.qq.com/s/Zs0uHrENeeLNYX1ZfpVTSg

感谢f感谢