JasonLee实时计算的博客_Spark实战系列,Flink实战系列,算法

Flink Collector Output 接口源码解析

0在 Flink 中 Collector 接口主要用于 operator 发送（输出）元素，Output 接口是对 Collector 接口的扩展，增加了发

java

android

flink

编程语言

spring

原创 2022-09-24 01:15:45 333 阅读

Flink 侧流输出源码解析

Flink 的 side output 为我们提供了侧流（分流）输出的功能，根据条件可以把一条流分为多个不同的流，之后做不同的处理逻辑，下面就来看下侧流输出相关的源码。先来看下面的一个 Demo，一个流被分成了 3 个流，一个主流，两个侧流输出。SingleOutputStreamOperator<JasonLeePOJO> process = kafka_source1

java

android

flink

编程语言

算法

原创 2022-09-17 05:54:07 128 阅读

【leetcode】剑指 Offer II 008. 和大于等于 target 的最短子数组

定义两个指针 \textit{start}start 和 \textit{end}end 分别表示子数组（滑动窗口窗口,1,1]..

leetcode

算法

数据结构

子数组

数组

原创 2022-08-20 01:18:31 89 阅读

VMware 桥接模式下本机 PING 不通虚拟机的解决方法

当我们想在一台电脑上（A）连接另外一台电脑上（B）的虚拟机时，会选择使用桥接模式，可能会遇

桥接模式

linux

网络

vmware

网络设置

原创 2022-08-13 01:05:14 2417 阅读

Flink 源码：广播流状态源码解析

Broadcast State 是 Operator State 的一种特殊类型。它的引入是为了支持这样的场景: 一个流的记录需要广播到所有下游任务，在这些用例中

java

android

设计模式

flink

spark

原创 2022-06-07 20:10:28 128 阅读

【leetcode-141】环形链表

环形链表我们很容易想到用一个 Set 集合，遍历链表把每一个节点加入到集合里，如果某个节点已经存在集合中，说明链表有环

链表

leetcode

数据结构

快慢指针

空间复杂度

原创 2022-06-04 00:49:06 77 阅读

IDEA 中使用 Big Data Tools 连接大数据组件

简介Big Data Tools 插件可用于 Intellij Idea 2019.2 及以后的版本。它提供了使用 Zeppelin，AWS S3，Spark，G

大数据

hadoop

java

数据库

kafka

原创 2022-05-26 12:13:43 2172 阅读

【Flink源码系列】Flink 源码分析之 Client 端启动流程分析

抛出问题首先来思考一个问题，我们在提交 Flink 任务的时候，在 F

java

hadoop

spring

android

flink

原创 2022-05-23 12:49:53 482 阅读

Flink Print SQL Connector 添加随机取样功能

Flink 提供了 Print SQL Connector 可以让我们非常方便的把数据打印到标准输出.有助于我们测试 SQL 任务,检验数据的正确性.但是在生产环境中,上游的数据量是非常大的,如果直接把数据输出的话,可能会把标准输出文件打满,造成页面卡死的情况,反而不利于我们观测数据,所以我们可以对 Print SQL Connector 进行简单的改造,加一个随机取样的...

java

flink

stream

大数据

redis

原创 2022-05-19 09:22:54 434 阅读

【leetcode-235】面试题 02.02. 返回倒数第 k 个节点

面试题 02.02. 返回倒数第 k 个节点题目描述思路分析这是一道简单的题目,主要是运用快慢指针的思想,初始化两个指针都指向 head,然后*

leetcode

链表

算法

代码实现

初始化

原创 2022-05-19 09:22:30 213 阅读

【leetcode-235】二叉搜索树的最近公共祖先

235. 二叉搜索树的最近公共祖先题目:思路:看到二叉树的题目,首先要想到递归,因为大多数的二叉树题目都是可以通过递归来解决的,再看这是一个二叉搜索树,立马就想到二叉搜索树的特质,左子树上所有节点的值都小于根节点的值,右子树上所有节点的值都大于根节点的值,它的左右子

leetcode

算法

子树

二叉搜索树

递归

原创 2022-05-11 10:16:38 133 阅读

Flink 通过 State Processor API 实现状态的读取和写入

大家好，我是 JasonLee。在 1.9 版本之前，Flink 运行时的状态对于用户来说是一个黑盒，我们是无法访问状态数据的，从

java

flink

hadoop

大数据

python

原创 2022-04-13 14:46:27 135 阅读

Apache Flink 1.14.4 Release Announcement

Apache Flink 社区非常高兴地宣布了 ApacheFlink 1.14.4 发布了，

java

python

mysql

flink

大数据

原创 2022-04-13 14:45:54 323 阅读

Flink on yarn 远程调试源码

大家好，我是 JasonLee。前几天有小伙伴问我，我写的 Flink 代码是提交到 yarn 上去运行的，那我怎么能远程调试代码呢？在本地调试代码大家都非常熟悉了，直接在 IDEA 里面打个断点，然后以 debug 模式启动就可以一步步调试代码了。其实 Flink on yarn 远程调试也不复杂，只需要简单的配置即可。集群配置(flink-conf.yaml)在 flink-conf.yaml

java

flink

zookeeper

debug

hadoop

原创 2022-04-11 15:01:32 834 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

wx5b4b2022dbf32的博客

Flink Collector Output 接口源码解析

Flink 侧流输出源码解析

【leetcode】剑指 Offer II 008. 和大于等于 target 的最短子数组

VMware 桥接模式下本机 PING 不通虚拟机的解决方法

Flink 源码：广播流状态源码解析

【leetcode-141】环形链表

IDEA 中使用 Big Data Tools 连接大数据组件

【Flink源码系列】Flink 源码分析之 Client 端启动流程分析

Flink Print SQL Connector 添加随机取样功能

【leetcode-235】面试题 02.02. 返回倒数第 k 个节点

【leetcode-235】二叉搜索树的最近公共祖先

Flink 通过 State Processor API 实现状态的读取和写入

Apache Flink 1.14.4 Release Announcement

Flink on yarn 远程调试源码