专栏名称: 朱小厮的博客

著有畅销书：《深入理解Kafka》和《RabbitMQ实战指南》。公众号主要用来分享Java技术栈、Golang技术栈、消息中间件（如Kafka、RabbitMQ）、存储、大数据以及通用型技术架构等相关的技术。

Flink 是如何支撑一分钟破百亿成交额的？

朱小厮的博客 · 公众号 · · 2021-01-27 08:51

正文

提到天猫双十一，一分钟破百亿的成交额，你肯定不会陌生，他的背后就是一套强大的流计算引擎在支撑，以便得到实时统计结果。面对日益增长的数据规模，以及越来越低时延的数据处理需求，流处理已成为每家公司数据平台的必备能力。

目前主流的流计算技术有 Apache Storm，Spark Streaming 和 Apache Flink，但真正能同时做到低时延、Exactly-Once 数据一致性保障及高吞吐的，只有 Flink 一个。而且，Flink 同时支持流处理和批处理，解决了用批来模拟流的技术局限性。

所以， 如果你要掌握未来大数据领域前瞻性技术，Flink 就是首选。

但是，Flink 的上手门槛比较高，API 不够直观和好用，不同使用模式的体验也不尽相同。所以，要真正掌握 Flink 并没有那么简单，比如：

这里分享给你一个 Flink 知识图谱，深入理解每个知识点，才能解决工作中的实际问题。

这张图谱出自张利兵，他是第四范式数据中台架构师，Apache Flink 社区贡献者。他在大数据领域深耕 7 年了，主导过大型国有银行云计算平台产品研发和部署，以及大数据平台产品研发和实施，著有《Flink 原理、实战与性能优化》一书。

最近，他推出了一门视频课 《Flink 核心技术与实战》 ，看了课程目录和部分内容，很想推荐给你。

在课程中，他深入剖析了 Flink Runtime 的设计与实现机制，带你掌握 Flink SQL 接口的原理与操作方法，理解 Flink DataStream API 的实践原理，并构建一个完整的实时推荐数据流系统，带你彻底拿下 Flink。

拼团+ 口令「happy2021」立省 40 元

原价 ¥129，仅限 100 个名额

通过这些年来的实战经验，学习流式计算和 Flink，有这么几个关键点：

当然，还有很多知识点，例如版本更新迭代带来的新知识，这些张利兵在课程中都有一一讲解。值得一提的是：课程基于 Flink 最新 1.11.1 版本讲解，通过原理解读和实战练习，带你掌握 Flink 在实时开发过程中所涉及到的全部核心技术，主要分为四部分：

首先，带你了解 Flink 基本概念，以及如何在不同的环境中安装 Flink 集群，让你对 Flink 有一个基本的认识；

接下来，重点讲解 Flink 作业的开发与实践，学习 DataStream API 和 Table ，以及 SQL 接口的使用与相应的原理解析。同时，每个章节末尾提供了对应的练习，加深你对 Flink 的掌握；

随后，深入剖析 Flink 的核心原理，包括 Runtime 的设计与实现，常用的监控指标 Checkpoint 等等，带你了解这些指标底层的含义，以及如何在实际项目中对集群进行调优。

最后，通过一个完整的推荐项目，将所有知识点串联起来，让你真正理解和掌握 Flink。

我有足够的把握，跟他学完这门课，你可以轻松解决工作中遇到的开发难题，提升流式数据处理能力，从而真正掌握 Flink。

说了那么多，先看看目录吧👇