目录1 介绍 21.1 文件介绍： 22 架构 33 特性 43.1 Get，Interator(迭代器)和快照 43.2 前缀迭代器 53.3 更新 53.4 持久化 53.5 ReadOnly 模式 63.6 数据库调试日志 63.7 事务日志 63.8 Memtable 管道 63.9 合并 Merge 操作 73.9.1 合并条件 74 工具 85 应用 95.1 初始化 95.2 使用
转载
2024-01-21 00:28:51
69阅读
rocksdb基础：LevelDB是由Google开源的，基于LSM Tree的单机KV数据库，其特点是高效，代码简洁而优美。RocksDB则是Facebook基于LevelDB改造的，属于嵌入式数据库，没有网络交互接口，必须和服务部署在同一台服务器高性能：RocksDB使用日志结构的数据库引擎，完全用C++编写，以获得最大的性能，键和值是任意大小的字节流为快速存储而优化：RocksDB针对快速、
转载
2024-01-30 02:44:02
105阅读
最近在做数据中台资产管理系统，主要核心功能是数据资产发布成api或者文档，客户通过api直接获取发布的数据资产。需要一下一下几点功能：1 界面sql编辑数据产品2. 自动发布数据产品到api调研后一段时间主要技术有Rocket-api和Dataway(hasor) https://www.hasor.net/doc/display/dataway简介："Rocke
转载
2023-11-12 15:17:57
232阅读
1. RocksDB介绍RocksDB是使用C++编写的嵌入式kv存储引擎，其键值均允许使用二进制流。由Facebook基于levelDB开发， 提供向后兼容的levelDB API。RocksDB针对Flash存储进行优化，延迟极小。RocksDB将最大限度的发挥闪存和RAM的高度率读写性能。RocksDB使用LSM存储引擎，纯C++编写。Java版本RocksJava正在开发中。参见Rocks
转载
2023-11-17 15:33:13
194阅读
因为使用到了MyRocks存储引擎，需要了解下下RocksDB，发现国内介绍的不详细就自己来写一遍吧。概述：
RocksDB 是针对KV数据存储的高性能嵌入式数据库，由Facebook的Dhruba Borthakur于2012年4月创建的LevelDB的分支，最初的
目标是提高服务工作负载的性能。
RocksDB针对多核CPU、高效快速存储（SSD)、I/O bound workload做
转载
2023-12-07 10:47:00
211阅读
1、架构Rocksdb中引入了ColumnFamily(列族, CF)的概念，所谓列族也就是一系列kv组成的数据集。所有的读写操作都需要先指定列族。写操作先预写日志（Write-Ahead Logging(WAL)），再写memtable，memtable达到一定阈值后切换为Immutable Memtable，只能读不能写。后台Flush线程负责按照时间顺序将Immutable Memtable
转载
2023-09-02 07:39:33
431阅读
Building RocksDB问：构建 RocksDB 所需的 gcc 的绝对最低版本是什么？ 答：4.8。 问：RocksDB 最新的稳定版本是什么？ 答：https://github.com/facebook/rocksdb/releases 中的所有版本都是稳定的。对于 RocksJava，稳定版本在 https://oss.sonatype.org/#nexus-search;quick
转载
2024-01-05 22:25:20
237阅读
【前言】了解一个组件的最好方式是先使用该组件，今天我们就来聊聊如何通过java api对iceberg进行操作。为什么是选择api进行介绍，而不是更通用的flink、spark、hive等。一方面是觉得flink、spark使用iceberg的介绍网上已经有很多，官网的介绍也比较清晰，而java api的介绍则相对少些；另一方面，不管是flink，spark最终都还是调用这些基本的api完成相关的
转载
2024-05-15 10:09:01
91阅读
RocksDB的安装以及基本接口的使用一、简介二、编译安装三、基本接口及使用四、RocksDB高级功能的使用五、完整编程示例总结 一、简介RocksDB 是 Facebook 的一个实验项目，目的是希望能开发一套能在服务器压力下，真正发挥高速存储硬件性能的高效数据库系统。RocksDB是一个存储引擎，不提供网络服务，只专注于具体的存储。这是一个 C++ 库，允许存储任意长度二进制 KV 数据。支
转载
2023-10-23 09:59:41
185阅读
由于自己不怎么会使用DynamoDB就算看到了官方的文档也无法理解具体细节 这里做一个总结，也方便需要使用的人借鉴。 由于创建表的操作已经再网页完成 这里记录本地使用Java来实现增删改查的步骤。 目录 第一步 配置参数第二步 创建表第三步 使用本地调用3.1创建一个对象类型增加记录查看记录修改记录删除记录所有代码 包含了import 内容 第一步 配置参数引入 pom 文件 SpringBoot
转载
2024-05-31 04:43:17
97阅读
在在虽然Kryo支持对RDD的cache和shuffle，但是在Spark中不是内置就显示提供使用Kryo将数据系列化到磁盘中的输入输出API，RDD中的saveAsObjectFile和SparkContext中的objectFile方法仅仅支持使用Java系列化。所以如果我们可以使用Kryo系列化将会变得很棒！在这篇文章中，我将讨论如何自定义Kryo系列化输出输出相关API来将数据进行读写到磁
转载
2024-01-02 16:15:37
54阅读
目录1. 整体架构 文件类型 文件组织结构2. Flush3. Compaction4. Write Stall RocksDB是facebook开发的一款高性能的kv数据库，源自于LevelDB，并且
转载
2023-07-28 09:41:53
387阅读
使用TerarkDB提升MyRocks的性能——随机读场景下的 MySQL性能优化雷鹏 peng@CTO大纲l MyRocks简介l 为什么选择 MyRocksl 传统数据库的块压缩l 硬件的发展趋势l TerarkDB 和 MyRocks 的关系l TerarkDB 的原理、优势、劣势l 新的问题，以及优化建议MyRocks简介l MyRocks=MySQL+RocksDB(存储引擎)l 基于
转载
2024-05-28 09:48:46
54阅读
为什么要查询API文档就好比学习汉字，学习英语，都免不了要查询字典、词典。因为包含东西太多，切不必每个都需要学习、记住，在需要用的时候可以快速查询即可。String类就包含50多个方法，且几乎所有方法都有用，在Java标准库中有几千个类，方法数量更加惊人。要想记住所有的类和方法是一件不可能的事情，也没有必要。只要学会如何查阅到标准库中的所有类和方法。API文档的位置API真相API解读API文档分
转载
2023-05-31 15:11:12
372阅读
API：1.2.3.4. 5.6.7.8.9.
转载
2023-05-18 12:32:48
988阅读
一、Java_API文档的概述简单的讲，API就是一个帮助文档，让您能快速了解java的属性，方法。加入想对字符串进行操作，就可以去api中查看String的方法，里面会有每个方法的用法，返回值等等。Java API通过支持平台无关性和安全性，使得Java适应于网络应用。Java API是运行库的集合，它提供了一套访问主机系统资源的标准方法。运行Java程序时，虚拟机装载程序的class文件所使用
转载
2023-09-11 16:43:25
148阅读
前言rocksdb有多种compaction策略，默认的compaction策略应该为leveled compaction，我们本次分析leveled compaction机制。本次分析主要涉及到几个问题：compaction何时被触发compaction具体流程compaction如何与mvcc机制联动前置知识一个库的SST文件有多个每个SST文件都属于某一层 除了第0层的SST文件，
转载
2024-01-22 00:26:00
275阅读
## 如何实现Java文档API
作为一名经验丰富的开发者，我将教你如何实现Java文档API。首先，我将向你展示整个实现过程的流程，并详细说明每一步需要做什么以及需要使用的代码。
### 流程表格
| 步骤 | 描述 |
| ---- | ------------------ |
| 1 | 创建项目 |
| 2 | 添加依赖
原创
2024-02-20 07:06:11
15阅读
本文针对RocksDB的基本概念进行总结1. 主要概念1.1. LSM Tree介绍 B+树读效率高而写效率差；log型文件操作写效率高而读效率差；因此要在排序和log型文件操作之间做个折中，于是就引入了log-structed merge tree模型，通过名称可以看出LSM既有日志型的文件操作，提升写效率，又在每个sstable中排序，保证了
转载
2023-11-03 08:26:10
151阅读
Table of Contents 1. RocksDB 内存表简介2. HashLinkList 内存表2.1. 应用示例2.2. 实现代码2.2.1. Put2.2.2. Get2.2.3. Delete RocksDB 内存表简介RocksDB 是一个基于 LSM 树（Log-Structured Merge-tree）结构的单机数据库引擎，内存表是它最重要的数据结构之一。除了默认的跳
转载
2024-01-04 12:06:52
181阅读
