etl 实现 读写 elastic 数据同步
etl engine 导出 hive 工具 部署简单 go语言开发 跨平台
etl engine 不仅仅适用关系型数据库中,还适配当下流行的时序数据库、消息中间件、Hadoop 生态中,支持多种类型数据库之间的融合查询及流式计算,支持 CDC模式增量同步解决方案,产品由 Go 语言开发,与生俱来的效率高,无需依赖各种动态库、静态库, 部署方便,开箱即用,轻量级引擎
在实施etl过程中,经常会遇到不同类型之间的转换,方式有很多种,下面是项目中使用etl-engine进行数据类型转换的收集整理,方便日后工作中查阅。
etl-engine 分别对 MySQL 和 PostgreSQL 实现了CDC监控能力,是同步增量数据的又一种解决方案,增量数据可输出到mysql postgres elastic hbase 等第三方介质或数据库中。
通过etl engine实现redis与mysql之间的数据同步
Copyright © 2005-2024 51CTO.COM 版权所有 京ICP证060544号