flink 任务提交问题汇总1. 提交flink自带任务WordCount.jar遇到的问题：2. 提交flink 批处理任务时遇到的问题3. flink定时任务，mysql连接超时问题4. flink checkpoint 恢复失败5. yarn 增加并行任务数量配置6. 流处理flink程序在hadoop集群跑了一段时间莫名挂掉1. 提交flink自带任务WordCount.jar遇到的问题：
转载
2024-05-09 20:04:29
62阅读
目录flink 数据源中的异常数据如何收集？jdbcSink写入clickhouse能保证exactly once吗？如何保证flink不重复消费kafka中的数据？flink根据什么判断是重启还是换了一个新的jar包？flink checkponit文件存在hdfs上，如何自动清理?flink 数据源中的异常数据如何收集？您可以使用Flink的侧输出（side output）机制来收集异常数据。
转载
2024-05-28 10:55:37
192阅读
目录回顾思考一个问题checkponit机制Checkpoint的种类及触发条件LSN推荐阅读本文稍微有点晦涩、但是看过之后你就能Get到MySQL的崩溃恢复到底是怎么做的！
回顾在这篇文章之前，白日梦跟你分享了什么是redo log、以及redo log的作用、redo log的刷盘机制等知识点。简单来说就是redo log是MySQL的事物日志。
原创
2022-09-22 12:28:26
170阅读
