# 从 MySQL 数据库中使用 Flink-CDC 和 Spring Boot 进行实时数据流处理
在现代应用程序中，实时数据处理变得越来越重要。Flink 是一个强大的分布式流处理框架，而 Spring Boot 是一个流行的 Java 开发框架。本文将介绍如何使用 Flink-CDC 和 Spring Boot，从 MySQL 数据库中提取数据，并进行实时数据流处理。
## 准备工作
原创
2023-07-20 04:17:45
376阅读
添加依赖<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://maven.apache.or
原创
2023-11-02 14:45:13
122阅读
点赞
1评论
本文分享自天翼云开发者社区《flink-cdc之mysql到es》，作者：刘****猛环境搭建version: '2'
services:
elasticsearch:
image: docker.elastic.co/elasticsearch/elasticsearch:7.6.1
ports:
- "9200:9200"
- "9300:9300"
CDC 简介什么是CDCCDC是Change Data Capture(变更数据获取)的简称。核心思想是，监
原创
2021-08-02 13:43:19
8300阅读
务进行订阅及消费。Flink_CDC1. 环境准备mysq...
原创
2022-10-03 14:27:56
10000+阅读
以供其他服务进行订阅及消费。Flink_CDC1. 环境准备mysq...
原创
2022-10-03 14:27:34
10000+阅读
本文首发于我的个人博客网站等待下一个秋Flink(://.ikeguang.com/article/2055)什么是CDC？CDC是（ChangeDataCapture变更数据获取）的简称。核心思想是，监测并捕获数据库的变动（包括数据或数据表的插入INSERT、更新UPDATE、删除DELETE等），将这些变更按发生的顺序完整记录下来，写入到消息中间件中以供其他服务进行订阅及消费。
原创
精选
2022-09-14 18:42:01
10000+阅读
本文首发于我的个人博客网站等待下一个秋Flink(https://www.ikeguang.com/article/2056)什么是CDC？CDC是（ChangeDataCapture变更数据获取）的简称。核心思想是，监测并捕获数据库的变动（包括数据或数据表的插入INSERT、更新UPDATE、删除DELETE等），将这些变更按发生的顺序完整记录下来，写入到消息中间件中以供其他服务进行订阅及消费。
原创
精选
2022-09-20 15:45:46
10000+阅读
务进行订阅及消费。Flink_CDC1. 环境准备mysqlHiveflink ...
原创
2022-10-08 13:37:52
10000+阅读
本文首发于我的个人博客网站: ikeguang.com什么是CDC？CDC是（Change Data Capt
原创
2022-10-08 09:59:05
10000+阅读
CDC是（Change Data Capture 变更数据获取）的简称。核心思想是，监测并捕获数据库的变动（包括数据 或 数据表的插入INSERT、更新UPDATE、删除DELETE等），将这些变更按发生的顺序完整记录下来，写入到消息中间件中以供其他服务进行订阅及消费。
原创
2022-09-17 00:36:40
10000+阅读
CDC是（Change Data Capture 变更数据获取）的简称。核心思想是，监测并捕获数据库的变动（包括数据 或 数据表
原创
2022-09-18 02:03:09
10000+阅读
摘要：本文整理自 Apache Flink Committer，Flink CDC Maintainer，阿里巴巴高级开发工程师徐榜江（雪尽）在 5 月 21 日 Flink CDC Meetup 的演讲。主要内容包括：Flink CDC 技术传统数据集成方案的痛点基于 Flink CDC 的海量数据的实时同步和转换Flink CDC 社区发展点击查看直播回放 & 演讲PDF一、Flink
转载
2024-02-29 07:27:30
221阅读
一、准备工作在开始研究Flink CDC原理之前(本篇先以CDC1.0版本介绍，后续会延伸介绍2.0的功能)，需要做以下几个工作(本篇以Flink1.12环境开始着手)打开Flink官网(查看Connector模块介绍)打开Github,下载源码(目前不能放链接，读者们自行在github上搜索)apache-flinkflink-cdc-connectorsdebezium开始入坑二、设计提议2.
转载
2024-02-19 20:41:34
511阅读
目录对flink checkpoint的理解与实现背景什么是flink checkpoint链接我的一些理解checkpoint实现流程checkpoint存储checkpoint实现checkpoint和savepoint的区别AB Test 对flink checkpoint的理解与实现背景由于我们公司的实时架构主要是kafka -> spark/storm -> kafka -
转载
2024-06-19 18:45:31
130阅读
Flink之容错机制一、检查点（Checkpoint）1.1、定义1.2、启用及配置检查点二、保存点（savepoint）2.1、保存点的用途2.2、使用保存点2.2.1、创建保存点2.2.2、从保存点重启应用 一、检查点（Checkpoint）1.1、定义有状态流应用中的检查点（checkpoint），其实就是所有任务的状态在某个时间点的一个快照（一份拷贝）。简单来讲，就是一次“存盘”，让我们
转载
2024-03-07 23:00:35
901阅读
CDC是（Change Data Capture 变更数据获取）的简称。核心思想是，监测并捕获数据库的变动（包括数据 或 数据表的插入INSER
原创
2022-09-17 00:37:10
10000+阅读
CDC是（Change Data Capture 变更数据获取）的简称。核心思想是，监测并捕获数据库的变动（包括数据 或 数据表的插入INSERT、更新UPDATE、删除DELETE等），将这些变更按发生的顺序完整记录下来，写入到消息中间件中以供其他服务进行订阅及消费。
原创
2022-09-17 00:37:46
10000+阅读
CDC是（Change Data Capture 变更数据获取）的简称。核心思想是，监测并捕获数据库的变动（包括数据 或 数据表的插入INSERT、更新UPDATE、删除DELETE等）
原创
2022-10-21 16:21:07
10000+阅读
CDC是（Change Data Capture 变更数据获取）的简称。核心思想是，监测并捕获数
原创
2022-09-17 07:24:34
10000+阅读
