目录1. 定义2.Hbase的发展历史3.关系型数据库的不足3.1无法适应多变的数据结构3.2高并发读写的瓶颈3.3可扩展性的限制4.HBase的特点5.使用场景6.rowkey设计原则6.1 rowkey长度原则6.2 rowkey散列原则6.3 rowkey的唯一原则7.查询方式8.Hbase的cell结构9.Hbase的读写流程9.1 HBase的读流程：9.2 HBase的写流程
转载
2023-10-11 08:31:36
115阅读
Hbase基本原理： 1.hbase的逻辑存储结构 1.每条数据都具有一个rowkey，其具有唯一性，相当于mysql表中的主键（primary key）。 2.其次是有一个列簇，相当就是列的集合，一个列簇在对应物理存储上相当于一个文件夹，当一个列簇中的字段越来越多的时候，就需要对表进行纵向的切分， ...
转载
2021-07-12 17:19:00
340阅读
2评论
一、简介HBase —— Hadoop Database的简称，Google BigTable的另一种开源实现方式，从问世之初，就为了解决用大量廉价的机器高速存取海量数据、实现数据分布式存储提供可靠的方案。从功能上来讲，HBase不折不扣是一个数据库，与我们熟悉的Oracle、MySQL、MSSQL等一样，对外提供数据的存储和读取服务。而从应用的角度来说，HBase与一般的数据库又有所区别，HBa
hbase写流程1、HBase是一种Log-StructuredMergeTree架构模式，2、用户数据写入先写WAL，再写缓存，3、满足一定条件后缓存数据会执行flush操作真正落盘，形成一个数据文件HFile。什么叫Compaction（压缩合并）1、随着数据写入不断增多，flush次数也会不断增多，进而HFile数据文件就会越来越多。2、然而，太多数据文件会导致数据查询IO次数增多，因此HB
转载
2019-04-08 13:54:06
3080阅读
点赞
一、 hbase的原理知识1. hbase介绍hbase是hadoop的一个重要成员，主要用于存储结构化数据，构建在hdfs之上的分布式存储系统，它主要通过横向扩展，通用不断增加廉价服务器增加计算和存储能力。2. hbase的特点1. 大：一个表可以有数十亿行，上百万列；2. 无模式：每行都有一个可排序的主键和任意多的列，列可以根据需要动态的增加，同一张表中不同的行可以有截然不同的列；3. 面向列
转载
2023-09-01 14:45:59
66阅读
基本原理1.Hbase概述1.1 什么是Hbase?1.2 hbase 特点2. Hbase 核心物理概念3. HBase集群结构3.1Hmaster 是主节点3.2 HRegionServer 从节点，会去管理一张表的region3.3Zookeeper3.4HDFS4.HBase和Hive的比较5.HBase命令5.1.显示hbase中的表列表：list5.2.创建表5.3查看表的详细信息：
转载
2023-07-12 21:18:29
68阅读
零序电流保护的基本原理是基于基尔霍夫电流定律：流入电路中任一节点的复电流的代数和等于零，即ΣI=0，它是用零序C.T作为取样元件。在线路与电气设备正常的情况下，各相电流的矢量和等于零（对零序电流保护假定不考虑不平衡电流），因此，零序C.T的二次侧绕组无信号输出（零序电流保护时躲过不平衡电流），执行元件不动作。当发生接地故障时的各相电流的矢量和不为零，故障电流使零序C.T的环形铁芯中产生磁通，零序C
转载
2009-07-30 17:11:59
845阅读
1 前言QoS（Quality of Service）是服务质量的简称。对于网络业务来说，服务质量包括哪些方面呢？从传统意义上来讲，无非就是传输的带宽、传送的时延、数据的丢包率等，而提高服务质量无非也就是保证传输的带宽，降低传送的时延，降低数据的丢包率以及时延抖动等。广义上讲，服务质量涉及网络应用的方方面面，只要是对网络应用有利的措施，其实都是在提高服务质量。因此，从这个意义上来说，防火墙、策略路
转载
精选
2015-04-03 16:25:18
363阅读
(1) 简单来说，爬虫就是获取网页并提取和保存信息的自动化程序(2) 使用 Python 爬取网页 > 使用【正则表达式 | CSS 选择器 | XPath 选择器】提取信息 > 使用数据库保存提取的信息(3) 有时候，我们用 Python 爬取网页得到的源代码和浏览器中看到的不一样，如下，浏览器会
转载
2019-03-14 14:22:00
131阅读
2评论
volatile这个关键字可能很多朋友都听说过，或许也都用过。在Java 5之前，它是一个备受争议的关键字，因为在程序中使用它往往会导致出人意料的结果。在Java 5之后，volatile关键字才得以重获生机。 volatile关键字虽然从字面上理解起来比较简单，但是要用好不是一件容易的事情。由于v ...
转载
2021-09-07 13:25:00
103阅读
2评论
一．基本原理CGI：通用网关接口（Common
原创
2023-08-14 22:53:59
177阅读
Application Application是在使用spark-submit 提交的打包程序，也就是需要写的代码。完整的Application一般包含以下步骤：（1）获取数据（2）计算逻辑（3）输出结果（可以是存入HDFS，或者是其他存储介质） Executor Executor是一个Applic
转载
2022-09-05 16:29:15
151阅读
GC的基本原理Java的内存管理实际上就是对象的管理，其中包括对象的分配和释放。对于GC来说，当程序员创建对象时，GC就开始监控这个对象的地址、大小以及使用情况。通常，GC采用有向图的方式记录和管理堆(heap)中的所有对象.GC在JVM中通常是由一个或一组进程来实现的，它本身也和用户程序一样占用heap空间，运行时也占用CPU。当GC进程运行时，应用程序停止运行。因此，当GC运行时间较长时，用户
转载
2008-12-26 22:16:08
637阅读
H3CSE路由篇：
动态路由协议的基本工作过程：1，邻居发现；2，路由发现；3，路由计算；4，路由维护
第一章：OSPF
一，OSPF的基本原理：
协议特点：1，应用于大规模网络
2，协议自身计
原创
2012-10-09 10:23:47
1615阅读
点赞
1评论
这几天正好辞职，在家闲着读书，感觉自己数据结构与算法这块始终是一个弱项，所以就以博客的形式记录自己重读经典的过程。水平有限，文中不免出现谬误，还请阅读本文的童鞋指正。每个抽象数据结构都会以三种强类型语言C、C++、Java实现 引子中将强类型这个词设置成了粗体，主要是因为我想从这个话题开始讨论关于语言及与语言不相关的抽象数据类型。 那么何为类
原创
2013-05-26 19:05:09
1645阅读
BGP路由传递原则
原创
2014-04-15 14:53:31
1067阅读
1 前言QoS（Quality of Service）是服务质量的简称。对于网络业务来说，服务质量包括哪些方面呢？从传统意义上来讲，无非就是传输的带宽、传送的时延、数据的丢包率等，而提高服务质量无非也就是保证传输的带宽，降低传送的时延，降低数据的丢包率以及时延抖动等。广义上讲，服务质量涉及网络应用的方方面面，只要是对网络应用有利的措施，其实都是在提高服务质量。因此，从这个意义上来说，防火墙、策略路
转载
2017-08-15 17:39:48
1812阅读
OSPF简单理解：每个路由器将自己的邻居关系以链路状态LSA的的形式构建，然后广播泛洪给其他路由器，当路由器LSA发送变化时，再向其他所有路由器发送此LSA。
原创
2019-06-27 19:30:41
538阅读
RDD（Resilient Distributed Dataset，也叫分布式弹性数据集）是Spark的核心抽象，在实现层面，RDD是一个抽象类，每种RDD都需要实现这个接口，所以Spark有多种RDD，每种RDD的实现方式都不相同。本文描述了RDD的基本概念和RDD的性质，每种性质的实现会后面的文章详细介绍。概述(Resilient Distributed Dataset) 弹性分布式数据集，又
原创
2020-12-25 21:20:32
384阅读
计算机的硬件结构图 网卡处理数据包的流程 计算机执行程序时，会有优先级的需求。比如，当计算机收到中断电信号时，它应立即去保存数据，保存数据的程序具有较高的优先级。 一般而言，由硬件产生的信号需要cpu立马做出回应（不然数据可能就丢失），所以它的优先级很高。cpu理应中断掉正在执行的程序，去做出响应； ...
转载
2021-08-03 14:07:13
552阅读
2评论
