近些年,随着5G和移动互联网的发展,企业业务不断升级对数据实时计算处理能力要求越来越高,如故障定位监测、电商促销等。Flink 作为新一代开源大数据计算引擎,以高吞吐、低延迟的优异实时计算能力,使企业快速实现数据算力升级,备受企业青睐。
【Flink、Spark、Kafka邮件列表活跃度对比】
Apache 2020 年度报告称 Flink 在其项目中一直处于先列,对比Spark、Kafka,一直较为活跃且呈上升趋势。目前,阿里、腾讯、字节等大厂都对它进行了布局,而且是字节流处理唯一标准。Flink 已成为当下互联网公司筛选人才的重要标准,但 Flink 上手着实不易。
Flink 从基础知识点到各技术模块内容多而杂, 网上资料大都直接代码显示,很少将其核心内容说清楚,学习吃力;学习内容不系统,理论与实际相悖,遇到问题还是一头雾水,根本处理不了实际中的复杂业务场景。