Flink从入门到精通100篇二十三-基于Apache Flink的爱奇艺实时计算平台建设实践

前言

随着大数据的快速发展,行业大数据服务越来越重要。同时,对大数据实时计算的要求也越来越高。今天会和大家分享下爱奇艺基于Apache Flink的实时计算平台建设实践。

今天的介绍会围绕下面三点展开:

  • Flink的现状与改进

  • 平台化的探索和实践:实时计算平台

  • Flink业务案例

01Flink的现状与改进

1. Flink现状

首先和大家分享下爱奇艺大数据服务的发展史。

 

  • 2012年搭建了第一个Hadoop集群,当时只有大概20几个节点,使用的计算框架是MapReduce和Hive等

  • 到2013,2014年,开始使用Hadoop 2.0,上线了Storm和Spark,由于Storm的使用性和稳定性不够好,被放弃使用,转而使用Spark

  • 2015年发布了第一个实时计算平台Europa,上线了Kafka

  • 2017年使用了Flink,同时我们基于Spark和Flink打造了流式计算引擎St

相关文章

      有些用户表示还不知道爱奇艺APP中轮播台在哪里,...
  爱奇艺这款播放器里面有海量大片哦,吸引了很多伙伴的使...
      爱奇艺APP很多伙伴在使用,并且不少用户都开通了...
      爱奇艺万能播放器是很多伙伴们都在使用的一款软...
      爱奇艺万能播放器估计大家都熟悉的吧,而对于爱...
      最近不少小伙伴们咨询关于爱奇艺万能播放器进行...