flink

全部文章近期文章热门文章标签简介

【flink】内容共 240 条

原创 Flink

目录1.Flink的引入 2.什么是Flink 3.Flink流处理特性 4.Flink基石 5.批处理与流处理 1.什么是FlinkFlink 起源于 Stratosphere 项目，Stratosphere 是在 2010~2014 年由 3 所地处柏林的大学和欧洲的一些其他的大学共...

flink

流处理

批处理

阅读 0 评论 0 点赞 0

吃胡萝卜的鳄鱼 11 天前
原创 Flink

Flink 一 Flink简介

flink

阅读 143 评论 0 点赞 0

茗君（Major_S） 170 天前
转载 Flink

Flink 概述基于数据流的一个有状态的计算框架无界流：有开始无结束（流式处理）有界流：有开始有结束（批处理） spark streaming: 批处理为主，流式处理是批处理的一个特性（mini batch） Flink 流式为主，...

flink

批处理

hdfs

并行度

hive

阅读 16 评论 0 点赞 0

YOLO晴 155 天前
原创【Flink】1.Flink概述

什么是FlinkApache Flink是一个框架和分布式处理引擎，用于对无边界和有边界的数据流进行有状态的计算。 Flink旨在运行在所有常见的群集环境中，以内存速度和任何规模执行计算。画重点分布式数据流计算有边界数据和...

flink

大数据

数据

流计算

阅读 17 评论 0 点赞 0

小雨青年 22 天前
转载 Flink基础（二）：Flink简介

1 初识 Flink 　　Flink 项目的理念是：“Apache Flink 是为分布式、高性能、随时可用以及准确的流处理应用程序打造的开源流处理框架”。　　Apache Flink 是一个框架和分布式处理引擎，用于对无界和有界数据...

flink

数据

sql

数据集

事件驱动

阅读 97 评论 2 点赞 0

mob604756f976e6 534 天前
原创 Flink学习三：Flink安装

一、Standalone方式二、yarn方式

flink学习

阅读 170 评论 0 点赞 0

wx60ebf8ec297e7 190 天前
原创 Flink（四）Flink的State

# 一、State概述 Flink里面有state的概念 **State:**一般指一个具体的**task/operator**的状态。State可以被记录，在失败的情况下数据还可以恢复，Flink中有两种基本类型的State：Keyed State，Operator State，他们...

Flink的state

Flink的状态

Flink的checkpoint

有状态计算

阅读 2381 评论 1 点赞 1

移望yuan 379 天前
转载 Flink学习笔记——Flink on YARN

Flink集群部署的方式有以下几种，在本文中主要介绍Flink on yarn： Yarn Mesos Docker/Kubernetes Standalone 参考： https://www.slideshare.net/tillrohrmann/redesigning-apache-flinks-distributed-arc...

flink

apache

html

ide

集群部署

阅读 114 评论 2 点赞 0

mob60475707634e 598 天前
原创【flink】flink实现wordCount(java)

文章目录前言一、wordCount 1、有界wordCount 2、无界wordCount 3、pom.xml 前言之前学习了spark,现在正在学习flink，感觉很类似，记录下flink的学习过程，请大家参考。一、wo...

flink

wordcount

apache

java

数据

阅读 186 评论 0 点赞 0

叁滴水班主任 142 天前
原创 Flink系列：Flink定义与特性

定义 Apache Flink 是一个分布式流式计算引擎，用于在数据流上进行有状态的计算（Flink系列：无界和有界数据流定义与区别）。特性低延迟有状态的 Flink 程序针对本...

flink

数据结构

持久化存储

流式计算

apache

阅读 92 评论 0 点赞 0

7961426 130 天前
转载 Flink基础（四）：Flink 运行架构

1 系统架构　　Flink是一个用于有状态的并行数据流处理的分布式系统。它由多个进程构成，这些进程一般会分布运行在不同的机器上。对于分布式系统来说，面对的常见问题有：集群中资源的分配和管理、进程协调调度、持...

flink

数据

检查点

应用程序

时间戳

阅读 76 评论 2 点赞 0

mb5fe94d257d327 63 天前
翻译 1.2 Introduction to Apache Flink（Flink介绍）

无限数据集的连续处理在我们详细了解Flink之前，让我们在更高层级审查处理数据时可能遇到的数据集的类型以及您可以选择处理的执行模型的类型。这两个想法经常是混合的，它们很清楚地分开它们。首先，两种类型数据集...

Introduction on flin

阅读 3699 评论 0 点赞 0

qq58ee24e2ee7de 1740 天前
转载 Flink基础（十七）： Flink CEP 简介

1.什么是 CEP 概念：　　一个或多个由简单事件构成的事件流通过一定的规则匹配，然后输出用户想得到的数据，满足规则的复杂事件。特征：  目标：从有序的简单事件流中发现一些高阶特征  输入：一个或多个由...

flink

事件流

数据

模式匹配

解决方案

阅读 191 评论 2 点赞 0

mb5fe190f8e35a0 527 天前
原创 Flink学习四：Flink运行架构

4.6 task与operator chains

flink学习

阅读 140 评论 0 点赞 0

wx60ebf8ec297e7 190 天前
原创 Flink（七）Flink的窗口聚合

# 一、 window增量聚合场景：窗口中每进入一条数据，就进行一次计算，等时间到了展示最后的结果。常用的聚合算子： ``` reduce(reduceFunction) aggregate(aggregateFunction) sum(),min(),max() ``` ![](https...

Window Join

Flink聚合

Flink的窗口聚合

增量聚合

阅读 2014 评论 0 点赞 0

移望yuan 378 天前
原创 Flink入门（一）——Apache Flink介绍

Apache Flink是什么？在当代数据量激增的时代，各种业务场景都有大量的业务数据产生，对于这些不断产生的数据应该如何进行有效的处理，成为当下大多数公司所面临的问题。随着雅虎对hadoop的...

Flink学习

大数据技术

阅读 160 评论 0 点赞 0

蜡笔小新v 223 天前
原创 Flink入门（二）——Flink架构介绍

1、基本组件栈了解Spark的朋友会发现Flink的架构和Spark是非常类似的，在整个软件架构体系中，同样遵循着分层的架构设计理念，在降低系统耦合度的同时，也为上层用户构建Flink应用提供了丰富...

Flink学习

大数据技术

阅读 239 评论 0 点赞 0

wx5c7a97e3804fd 223 天前
原创 Flink入门（一）——Apache Flink介绍

Apache Flink是什么？在当代数据量激增的时代，各种业务场景都有大量的业务数据产生，对于这些不断产生的数据应该如何进行有效的处理，成为当下大多数公司所面临的问题。随着雅虎对hadoop的...

Flink学习

大数据技术

阅读 136 评论 0 点赞 0

wx5c7a97e3804fd 223 天前