Kafka日常维护记录。Topic分区副本缺失修复
流程
官方描述The Apache Hive™ data warehouse software facilitates reading, writing, and managing large datasets residing in distributed storage and queried using SQL syntax.Apache Hive 数据仓库软件有助于读、写和管理驻留在分布式存储中
HBase是一个分布式的、面向列的开源NoSql数据库。适合存储半结构化或非结构化数据,底层采用Key-Value键值对模式存储。适合海量数据存储、超大规模并发访问,例如即席查询等。HBase数据结构模型HBase采用区别于B、B-Tree随机写的LSM-Tree顺序写模式,Kudu同样是采用LSM-Tree数据结构模型。数据自上向下分层下沉,由以下几个关键动作完成:压缩、缓存、索引、合并LSM模
Kudu是面向列的、结构化数据的、Nosql类型的分布式数据存储管理器。即支持行级别的随机读写,并支持批量顺序检索功能;使用场景类似于HBase,能快速、高效处理OLAP作业。
DataX 二次开发,支持oraclewrite插件的update模式
Copyright © 2005-2024 51CTO.COM 版权所有 京ICP证060544号