我们知道因为通常流是无限的（无界的），所以在流上的工作方式与批处理不同，使用相同的方式对流中的所有元素进行计数是不可能的。 但是很多时候又需要使用聚合事件(比如计数、求和)统计流上的数据，这个时候的聚合就用到了 window，因为需要由 window 来划定范围，比如 "计算过去的5分钟" ， "统计最后100个元素的和" 等等。 window 窗口操作是一种可以把无限数据切割
转载
2024-03-15 05:45:30
24阅读
一、table source1、TableSource源码trait TableSource[T] { //TableSource 是一个接口总共有三个方法
def getReturnType: TypeInformation[T] //获取返回的DataStream或者 DataSet的类型
def getTableSchema: TableSchema //获取table表
转载
2024-03-10 22:45:35
61阅读
0 简介 Flink程序所处理的流中的事件一般是对象类型。操作符接收对象输出对象。所以Flink的内部机制需要能够处理事件的类型。在网络中传输数据，或者将数据写入到状态后端、检查点和保存点中，都需要我们对数据进行序列化和反序列化。为了高效的进行此类操作，Flink需要流中事件类型的详细信息。Flin ...
转载
2021-08-26 22:29:00
336阅读
2评论
assume cs:code, ds:datadata segmenta db 1,2,3,4,5,6,7,8b dw 0x db 88Haddress dw OFFSET a, seg a, OFFSET b, seg b ; a的偏移地址，a的段地址， b的偏移地址， b的段地址data endscode segment start: mov bx, data...
原创
2021-08-24 15:36:18
219阅读
When using side outputs, you first need to define an OutputTag that will be used to identify a side output stream: // this needs to be an anonymous in ...
转载
2021-08-24 23:26:00
665阅读
2评论
https://www.bilibili.com/video/BV1yk4y1z7Lr ...
转载
2021-08-21 20:00:00
112阅读
2评论
Java学习笔记-Day85 Spring Boot框架（五）一、Spring Boot整合Redis数据库（JPA）1、操作步骤2、更新数据库，清空对应缓存3、相关注解3.1、 @Cacheable3.2、@CacheEvict3.3、@CachePut二、压力测试三、Spring Boot整合Swagger2四、热部署 一、Spring Boot整合Redis数据库（JPA） 1、操作
转载
2024-07-02 11:44:26
0阅读
0 Flink的任务链 Flink 中的每个算子都可以设置并行度，每个算子的一个并行度实例就是一个 subTask。由于 Flink 的 TaskManager 运行 Task 的时候是每个 Task 采用一个单独的线程，这会带来很多线程切换和数据交换的开销，进而影响吞吐量。 为了避免数据在网络或线 ...
转载
2021-08-31 00:06:00
773阅读
2评论
Flink 在编写逻辑时会用到的与时间相关的API，下图总结了 Event Time 和Processing Time 相对应的 API。 在应用逻辑里通过接口支持可以完成三件事： 第一，获取记录的时间。Event Time 可以调 context.getTimestamp，或在SQL 算子内从数据 ...
转载
2021-08-30 23:43:00
380阅读
2评论
https://github.com/sunjincheng121/know_how_know_why/tree/master/khkw/No22-out-of-order ...
转载
2021-08-21 17:23:00
184阅读
2评论
0 简介 1 介绍 CheckPoint 如何保障 Flink 任务的高可用2 CheckPoint 中的状态简介3 如何实现全域一致的分布式快照？4 什么是 barrier？什么是 barrier 对齐？5 证明了：为什么 barrier 对齐就是 Exactly Once，为什么 barrier ...
转载
2021-08-31 00:33:00
208阅读
2评论
一、任务：Pc server(win2008 64bit)要连DS4300（SM 10.15即可管理）
二、需要提前了解和准备的内容：
1、操作系统类型、版本、补丁集、位数
2、光纤卡类型、驱动安装
3、存储微码版本、适用的存储管理软件版本、是否需要升级存储微码
4、兼容列表：存储+操作系统+光纤卡+存储管理软件+多路径软件要求，必要的话，分别升级；
Note: T
原创
2011-12-27 22:10:29
771阅读
导语MyCat 一个彻底开源的，面向企业应用开发的大数据库集群。基于阿里开源的 Cobar 产品而研发。能满足数据库数据大量存储；提高了查询性能。文章介绍如何实现 MyCat 连接 MySQL 实现主从分离，并集成 Spring Boot 实现读写分离。MySQL配置主从关系说明192.168.0.105 Linux 数据库作为主master数据库127.0.0.1 Window 作为从slave
转载
2024-05-10 14:28:34
53阅读
# 解决Java.io.FileNotFoundException异常问题
## 引言
在Java开发过程中，我们经常会遇到各种异常情况。其中，`java.io.FileNotFoundException`是一个常见的异常，它表示无法找到指定路径下的文件或目录。本文将教会刚入行的小白如何解决这个异常。
## 解决流程
以下流程图展示了解决Java.io.FileNotFoundExceptio
原创
2023-08-30 13:48:58
221阅读
两个不同的firmware p_w_picpath存储于DS300和DS400.启动控制器的过程中，可以通过按1或者2选择第一个或者第二个p_w_picpath。一个firmware p_w_picpath是活动的并且用于运行控制器，另外一个是被动的。只有被动的firmware p_w_picpath是在升级的过程中可以被覆盖的。注意：Firmware升级可以在正常的
转载
精选
2006-12-27 19:54:00
2241阅读
原标题：五款常用安卓模拟器哪个玩3D大型手游流畅好用不卡顿？随着现在手游包体越来越大，使用3D引擎之后有更炫酷的动画，这个就对安卓模拟器提出了越来越高的要求。很多用安卓模拟器玩手游的用户都会遇到某款游戏大作卡顿或者直接都玩不了的情况。其实很多用户并不知道市场的安卓模拟器还是有区别的，不同的安卓模拟器对游戏的优化都不一样，所以我就把目前最常用的几款安卓模拟器产品进行比较(雷电模拟器、逍遥模拟器、MU
转载
2023-10-13 12:45:06
11阅读
1.需求在大数据的实时处理中，实时的大屏展示已经成了一个很重要的展示项，比如最有名的双十一大屏实时销售总价展示。除了这个，还有一些其他场景的应用，比如我们在我们的后台系统实时的展示我们网站当前的pv、uv等等，其实做法都是类似的。需求如下：实时计算出当天零点截止到当前时间的销售总额计算出各个分类的销售top3每秒钟更新一次统计结果2.数据首先我们通过自定义source 模拟订单的生成，生成了一个T
转载
2024-03-12 11:14:30
32阅读
flink集群搭建# 下载 flink
wget https://archive.apache.org/dist/flink/flink-1.13.0/flink-1.13.0-bin-scala_2.12.tgz
tar xf flink-1.13.0-bin-scala_2.12.tgz
cd flink-1.13.0/
# 创建namespace为flink
kubectl create
