开源数据传输组件 DTLE 3.20.08.0 已于今日发布。


一、DTLE 项目介绍

爱可生开源社区的 DTLE ,自开源起一直定位于一款针对 MySQL 使用特点、支持多种使用场景的数据传输组件,希望能够解决当前 MySQL 应用中保障数据传输质量、能够适配复杂场景、提供多样功能的问题。

DTLE 获取

版本库:https://github.com/actiontech/dtle

文档:https://actiontech.github.io/dtle-docs-cn/

发布信息:https://github.com/actiontech/dtle/releases

Tips:建议下载最新的 Releases 版本。RH/Centos 等下载 rpm 安装包,一般 linux下载 tar 包,或使用 docker 运行。


二、新功能

Major changes have been made. Now dtle works as a plugin of nomad(https://www.nomadproject.io).

进行了重大更改。现在 DTLE 作为 nomad(https://www.nomadproject.io)的插件。

  • Code optimization and refactoring -- 优化、重构代码

    Adapting to latest nomad -- 适配最新的 nomad

  • Reduced memory consumption -- 降低内存消耗
  • Improved Kafka ouput performance -- 提升 Kafka 输出性能

  • Reorganized logs and error message -- 重整日志和报错信息

  • Fixed some bugs -- 修复部分 bug

    NatsAddr might be empty sometime -- NatsAddr 有时为空

    Progress is updated before real execution -- 进度被提前更新

    Kafka might report "unknown table structure" -- Kafka 报错 "unknown table structure"

    Kafka might send the same data repeatedly -- Kafka 重复发送相同消息
  • Management -- 管理机制更新

    Using consul for building up a cluster -- 使用 consul 来自动搭建集群

    Using consul for saving meta data -- 使用 consul 保存

    Jobs are identified by name instead of random UUID -- job 标识符从随机 UUID 改为自定义名称

    Use [HCL](https://github.com/hashicorp/hcl) for job specification -- 可使用 HCL 格式(https://github.com/hashicorp/hcl) job 配置

    Json job (new format) and HTTP API is also supported -- json 格式依然被支持(新内容格式)

    Compatibility layer for old HTTP API -- 提供兼容层,可使用老 API 和 job json

快速开始

使用 rpm 安装或者 docker

docker pull consul:latest && docker pull actiontech/dtle:3.20.08.0
想了解更多请看相关文档:https://actiontech.github.io/dtle-docs-cn/