小叔叔书的博客_canal,网络,elasticsearch

hbase shell&java 获取多版本的值

在HBase中一个row对应的相同的列只会有一行。使用scan 或get 得到都是最新的数据，如果我们对这某一row所对应的列进行了更改操作后，并不会多生成一条数据，不会像数据库一样，插入时多生成一条记录，在HBase中对同一条数据的修改或插入都只是put操作，最终看到的都是最新的数据，其它的数据在不同的version中保存，默认是隐藏的，通过时间戳区分，Hbase默认保存最近的三个版本，如何才能看到这些旧版本的数据了？插入测试数据：hbase(main):026:0> put '...

java

hbase

数据库

apache

hadoop

转载 2021-08-31 13:31:04 310 阅读

hbase中scan和get查看版本数据的区别

一：查看当前所用表二：scan扫描全表数据说明：scan全表扫描出来的数据都是目前时间戳最新的数据。三：利用scan查看同一个cell之前已经put的数据（scan时可以设置是否开启RAW模式，开启RAW模式会返回已添加删除标记但是未实际进行删除的数据）说明：虽然已经put覆盖了之前同一个cell的数据，但是实际上数据并没有进行删除，只是标记删除了，利用RAW模式可以看到。红线的是添加删除标记，但是实际上没有删除的。四：get获取某个cell...

hbase

数据

表数据

时间戳

表名

转载 2021-08-31 13:31:02 1876 阅读

Hbase 098.4中使用新API通过Get列表获取多行的列值

在Hbase0.98.4中通过Get列表的方式获取Hbase中多行的列值，本来想使用KeyValue类来处理的，结果发现该类的getRow()和getValue()的两个方法已经废弃了，最终使用新API中的Cell接口来实现，如下：Hbase中测试表中数据如下：hbase(main):005:0> scan 'testtable'ROW COLUMN+CELL ...

hbase

big data

hadoop

jar

zookeeper

转载 2021-08-31 13:30:59 146 阅读

HBase 增删改查Java API

1. 创建NameSpaceAndTablepackage com.HbaseTest.hdfs;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.HColumnDescriptor;import org.apache.hadoop.hbase.HTableDescriptor;import org.apache.hadoop.hb

hadoop

apache

java

hdfs

数据

转载 2021-08-31 13:30:57 266 阅读

HBase 学习一：客户端写缓冲区 autoFlush

hbase

服务端

客户端

海量数据

github

转载 2021-08-31 13:30:54 234 阅读

HBase表的基本结构和常用命令行操作

一、HBase表的基本结构 1.概述：　　　平时常见的MySQL、Oracle数据库都是传统型关系数据库，它们都是按行查询、按行存储；而HBase为非关系型数据库，它是按列存储的的。　　　在HBase插入数据时，先输入数据的格式为rowkey => info => column => value rowkey：行键，唯一且不重复 info：列族（数量一般不超过3个） c

hbase

数据

命名空间

插入数据

版本号

转载 2021-08-31 09:55:50 127 阅读

深入理解 HBase Compaction 机制

胜数了，本文也是主要参考HBase官网、社区的一些文章总结，从各个关键点进行总结，旨在为了帮助我们更加牢固的掌握Compaction机制。为什么要执行 Compaction熟悉HBase的同学应该知道，HBase是基于一种LSM-Tree（Log-

hbase

数据库

默认值

数据

线程池

转载 2021-08-31 09:54:47 1316 阅读

调整内核参数:vm.min_free_kbytes

调整内核参数:vm.min_free_kbytes内核参数：内存相关内存管理从三个层次管理内存，分别是node, zone ,page;64位的x86物理机内存从高地址到低地址分为: Normal DMA32 DMA.随着地址降低。

centos

内存回收

5g

正常运行

内存管理

转载 2021-08-30 11:12:47 958 阅读

Region/Store/StoreFile/Hfile之间的关系

1. Regiontable在行的方向上分隔为多个Region。Region是HBase中分布式存储和负载均衡的最小单元，即不同的region可以分别在不同的Region Server上，..

big data

数据

hdfs

负载均衡

数据块

原创 2021-08-30 11:12:33 775 阅读

vm.min_free_bytes参数的设置和意义

今天在做实验的时候尝试修改了vm.dirty_ratio等参数，都没有能够引发OOM_KILLER，但是参数vm.min_free_bytes的修改引发了系统的宕机或者引发了系统的OOM_KILLER现象

linux

做实验

内存空间

转载 2021-08-30 11:11:56 273 阅读

RabbitMQ 内存和磁盘警告

内存和磁盘警告有两种情况下，Rabbit MQ会停止读取客户端的连接socket,为了防止crash崩溃，这两种情况是：内存使用达到配置值磁盘空间下降到配置值下

服务器

客户端

内存警告

配置文件

置位

原创 2021-08-27 14:04:49 1428 阅读

大型网站的负载均衡器、db proxy和db

大型网站的负载均衡器、db proxy和db本文主要分析网站后台架构中的负载均衡器，企业常用的硬件负载均衡器软件负载均衡器、数据库代理服务器和数据库。1.1 负载均衡在大型网站部署中，负载均衡至少有三层部署。

mysql

负载均衡

服务器

数据库

客户端

转载 2021-08-20 11:11:13 565 阅读

简述DNS进行域名解析的原理

DNS域名解析是互联网上非常重要的一项服务，上网冲浪（还有人在用这个词吗？）伴随着大量DNS服务来支撑，而对于网站运营来说，DNS域名解析的稳定可靠，意味着更多用户的喜欢，更好的SEO效果和更大的访问流量。

dns服务器

服务器

ip地址

域名解析

缓存

转载 2021-08-19 15:46:33 813 阅读

MR、Tez和Spark执行引擎对比

MapReduceMapReduce是一种编程模型，用于大规模数据集（大于1TB）的并行运算。概念"Map（映射）“和"Reduce（归约）”。TezTez是Apache开源的支持DAG作业的计算框架，它直接源于MapReduce框架，核心思想是将Map和Reduce两个操作进一步拆分，即Map被拆分成Input、Processor、Sort、Merge和Output， Reduce被拆分成Input、Shuffle、Sort、Merge、Processor和Output等，这样，这些分解后的元操作

spark

hive

数据

依赖关系

mapreduce

转载 2021-08-16 10:16:57 1693 阅读

2021-08-15

时序数据库：提供高效存取时序数据和统计分析功能的数据管理系统，广泛应用于物联网（IoT）设备监控系统、企业能源管理系统（EMS）、生产安全监控系统和电力检测系统等行业场景。TSDB特点高吞吐量写入数据分级存储高压缩率减少存储空间多维度查询能力高效聚合能力OpenTSDBOpentime series database是基于Hbase的分布式的，可扩展的时间数据库它是建立在Hbase上的一层数据读写服务How does OpenTSDB work?OpenT.

数据

html

官网

用户态

数据查询

转载 2021-08-16 10:16:55 95 阅读

RAC文件路径

1.tns路径：/u01/app/oracle/product/11.2.0/db_1/network/admin 2.监听路径：/u01/

文件路径

oracle

sql

原创 2021-08-10 11:03:06 549 阅读

AWR报告详细分析

AWR报告详细分析 AWR 是 Oracle 10g 版本推出的新特性，全称

sql

oracle

等待事件

sed

数据

转载 2021-08-10 11:02:49 1543 阅读

表空间传输

在实验前我们需要明白一些明白一些概念TRANSPORT_TABLESPACE 导出可传输表空间元数据，通过这个选项对一组自包含，只读的表空间只导出元数据，然后在操作系统层将这些表空间的文件拷

表空间

oracle

sql

数据库

元数据

转载 2021-08-10 10:30:19 130 阅读

硬盘基本术语（磁道、扇区、柱面、磁头数、簇）

磁盘结构硬盘的物理结构一般由磁头与盘片、电动机、主控芯金属材料制成的涂以磁性介质的盘...

磁道

柱面

数据

寻址

3d

转载 2021-08-10 10:29:54 4197 阅读

DNS劫持原理、DNS 污染的原理

DNS劫持原理 DNS劫持就是dns系统被入侵或人为的修改某些记录,如A记录,用专业的术语来讲就是通过某些手段取得某域名的解析记录控制权，进而修改此域名的解析结果，导致对该域名的访问由原IP地址转入到修改后的指定IP，其结果就是对特定的网址不能访问

返回结果

ip地址

dns服务器

数据

旁路

转载 2021-08-10 10:29:41 2567 阅读

/etc/rc.d/init.d和/etc/init.d 联系区别

1.[root@service2 usr]# ll /etc/init.dlrwxrwxrwx. 1 root root 11 3月 26 15:18 /etc/init.d -> rc.d/init.d说明/etc/init.d是/etc/rc.d/init.d的软连接。2./etc/rc.d/init.d里面包含了一些脚本，这些脚本供INIT进程（也就是1号进程）在系统从初始化的时候按...

运行模式

初始化

运行级别

sed

linux

原创 2021-08-10 10:29:27 1085 阅读

ERROR 1133 (42000): Can't find any matching row in the user table

今天在设置远程连接时，报错ERROR 1133 (42000): Can't find any

mysql

sed

字段

数据库mysql

ide

原创 2021-08-10 10:29:19 1286 阅读

官方文档翻译版本（5.7.22-ndb-7.5.10-cluster-gpl）

官方文档翻译版本（5.7.22-ndb-7.5.10-cluster-gpl）一、环境搭建共 Installing an NDB Cluster ...

mysql

sql

linux

sed

hive

原创 2021-08-10 10:29:09 156 阅读

解析中间人攻击(2/4)---DNS欺骗

在上篇文章中，我们讨论了正常ARP通信以及ARP缓存中毒是如

dns服务器

ip地址

客户端

缓存

转载 2021-08-10 10:28:34 344 阅读

无线局域网的嗅探攻击和防御

无线局域网的嗅探攻击和防御-----ettercap+driftnet1 实验要求和目

嗅探

数据

抓包

mac地址

ip地址

转载 2021-08-10 10:28:13 1419 阅读

关于 db block gets,consistent gets,physical reads的概念

在Oracle的文档中有这样的解释：Recursive Calls: Number of recursive calls generate

数据块

oracle

c#

sql

数据库

转载 2021-08-10 10:27:37 667 阅读

自己动手实践理解数据库REPEATABLE READ && Next-Key Lock

sql

隔离级别

数据

加锁

mysql

转载 2021-08-10 10:27:17 179 阅读

RAC中的css,crs,evm说明

从Oracle 10g RAC 开始，Oracle 已捆绑其自身的群集软件。初始发名为...

css

oracle

发行版

故障切换

重命名

转载 2021-08-10 10:26:54 298 阅读

xtrabackup 备份恢复过程详解

xtrabackup是Percona公司CTO Vadim参与开发的一款基于InnoDB

增量备份

数据

备份过程

数据文件

回滚

转载 2021-08-10 10:26:29 531 阅读

Binlog日志的三种模式介绍及模式修改

Binlog日志的三种模式介绍一、Binlog日志的三种模式 1.1 Statement Level模 vel下的缺点，不需要记...

mysql

数据

log日志

sql

tomcat

转载 2021-08-10 10:26:04 200 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

wx5caecf2ed0645的博客

hbase shell&java 获取多版本的值

hbase中scan和get查看版本数据的区别

Hbase 098.4中使用新API通过Get列表获取多行的列值

HBase 增删改查Java API

HBase 学习一：客户端写缓冲区 autoFlush

HBase表的基本结构和常用命令行操作

深入理解 HBase Compaction 机制

调整内核参数:vm.min_free_kbytes

Region/Store/StoreFile/Hfile之间的关系

vm.min_free_bytes参数的设置和意义

RabbitMQ 内存和磁盘警告

大型网站的负载均衡器、db proxy和db

简述DNS进行域名解析的原理

MR、Tez和Spark执行引擎对比

2021-08-15

RAC文件路径

AWR报告详细分析

表空间传输

硬盘基本术语（磁道、扇区、柱面、磁头数、簇）

DNS劫持原理、DNS 污染的原理

/etc/rc.d/init.d和/etc/init.d 联系区别

ERROR 1133 (42000): Can't find any matching row in the user table

官方文档翻译版本（5.7.22-ndb-7.5.10-cluster-gpl）

解析中间人攻击(2/4)---DNS欺骗

无线局域网的嗅探攻击和防御

关于 db block gets,consistent gets,physical reads的概念

自己动手实践理解数据库REPEATABLE READ && Next-Key Lock

RAC中的css,crs,evm说明

xtrabackup 备份恢复过程详解

Binlog日志的三种模式介绍及模式修改

欢迎