一、背景介绍 项目中需要按需连接不同的数据源，原项目默认为mysql连接，现在要添加Hbase、Impala、Orcale三种数据源，以支持现有的查询（属于报表子系统）。 MySql、Orcale、Impala是关系型数据库，可以用bean来配置连接池，方便、快捷的完成数据库访问。而Hbase属于列存储数
转载
2023-07-14 15:56:44
91阅读
一、集群规划这里搭建一个 3 节点的 HBase 集群，其中三台主机上均为 Regin Server。同时为了保证高可用，除了在 hadoop001 上部署主 Master 服务外，还在 hadoop002 上部署备用的 Master 服务。Master 服务由 Zookeeper 集群进行协调管理，如果主 Master 不可用，则备用 Master 会成为新的主 Master。 二、
转载
2023-07-21 16:03:25
86阅读
在HBase1.1.0发布之前，HBase同一集群上的用户、表都是平等的，大家平等共用集群资源。容易碰到两个问题： 一是某些业务较其他业务重要，需要在资源有限的情况下优先保证核心重要业务的正常运...
原创
2021-08-05 17:23:27
688阅读
本文是在hbase和HADOOP下载好后进行配置问题，非HA安装教程如下hadoop完整安装:Hadoop学习之路（四）Hadoop集群搭建和简单应用 - 扎心了，老铁hbase2.x安装参考:HBase学习之路 （二）HBase集群安装 - 扎心了，老铁HADOOP 2.7.X版本配置信息 ，配置路径：HADOOP_HOME/etc/hadoopA.hadoop-env.sh#${JAVA_HO
转载
2023-07-12 10:58:44
29阅读
部署架构从Hasee的部署架构来说，Hbase有两种服务器：Master服务器和RegionServer服务器。 一般一个Hbase集群中一个Master服务器和几个RegionServer服务器。 Master服务器负责维护表结构信息；RegionServer服务器负责存储实际的数据，RegionServer保存的表数据直接存储在Hadoopde HDFS上RegionServer完全依赖zoo
转载
2023-08-18 22:08:53
136阅读
# Zookeeper配置HBase集群：一步一步指导
HBase是一种分布式的、可扩展的列式存储系统，它通常用于处理大数据。而Zookeeper是一个高可用的分布式协调服务，主要用于管理HBase中的各种元数据。本文将介绍如何配置Zookeeper以支持HBase集群，并通过简单的代码示例以及图示帮助您更好地理解。
## 一、Zookeeper简介
Zookeeper提供了一种高度可靠的分
原创
2024-09-23 03:25:25
143阅读
## HBase集群配置Kerberos
在大数据领域，HBase是一个高可靠性、高性能、面向列的分布式数据库。在实际生产环境中，为了保证数据的安全性，通常需要将HBase集群配置为使用Kerberos进行认证和授权。本文将介绍如何配置HBase集群以使用Kerberos，并提供相应的代码示例。
### 1. 理解Kerberos认证
Kerberos是一个网络认证协议，主要用于验证用户身份
原创
2023-09-02 10:15:28
495阅读
在安装之前，查了一下资料，关于hbase与hadoop兼容性的。最开始看hadoop的时候，在好像慕课网上看的，hadoop全家桶之间的兼容性问题（以前被java web的各种jar包坑坏了的Java菜鸟，心理有点小阴影），还有特意出的cdh版本（Cloudera 公司出的，每个hadoop的cdh版本，都有对应的其他组件的cdh版本）然后，感觉就坏了，我装的hadoop 3.0.1是最新
转载
2024-07-22 11:39:16
54阅读
一.集群健康值Elasticsearch 是有集群健康值的，红色，黄色，绿色 1）如果我们是单机单节点的Elasticsearch ，也就是说只有一个主节点的情况下，集群健康值是黄色的。也就是说只保存了一份数据。 2）如果此时我们新增一个节点，那么这个节点会默认成为主节点的副本节点，并同步对应数据。此时集群健康值是绿色的。即有2份数据可用。 3）如果一开始就有多个节点，一个主节点，多个字节点，此时
转载
2024-03-16 09:41:36
0阅读
HBase架构原理HBase是一个高可靠、高性能、面向列、可伸缩的分布式存储系统，利用HBase技术可在廉价的PC Server上搭建大规模结构化存储集群。HBase是Google BigTable的开源实现，与Google BigTable利用GFS作为其文件存储系统类似，HBase利用Hadoop HDFS作为其文件存储系统；Google运行MapReduce来处理BigTable中的海量数据
转载
2023-07-06 17:16:38
55阅读
Hbase集群搭建注意：在安装hbase或者hadoop的时候，要注意hadoop和hbase的对应关系。如果版本不对应可能造成系统的不稳定和一些其他的问题。在hbase的lib目录下可以看到hadoop对应jar文件，默认情况下hbase下lib的jar文件对应hadoop的相对稳定的版本。如果需要使用其他的hadoop版本，需要将hbase lib下的hadoopjar包，替换掉需要使用的ha
转载
2023-06-01 15:18:59
236阅读
docker先使用Docker构建一个Zookeeper运行环境的镜像,之前做过Hadoop的集群，我做过一个镜像（这里）然后使用
原创
2023-09-25 09:21:26
98阅读
1、环境介绍（1）IP 规划 hserver 192.168.0.130hclient1 192.168.0.131hclient2 192.168.0.132（2）软件版本 OS：rhel6.3-x86_64 JDK：jdk1.6.0_41HADOOP：hadoop-1.1.1 HBASE：
原创
2013-03-07 15:17:55
1792阅读
HBase 高可用集群配置基于最新的 hbase-2.4.2 版本。3台机器组成 HBase HA 集群，运行的进程如下： flink0
原创
2023-01-11 00:51:17
316阅读
http://www.importnew.com/3020.html 好文 importnew
原创
2023-05-05 16:13:39
81阅读
在HBase1.1.0发布之前，HBase同一集群上的用户、表都是平等的，大家平等共用集群资源。容易碰到两个问题： 一是某些业务较其他业务重要，需要在资源有限的情况下优先保证核心重要业务的正常运...
原创
2021-06-17 10:14:57
350阅读
hadoop集群的搭建搭建真正的zookeeper集群Hbase需要安装在成功部署的Hadoop平台，并且要求Hadoop已经正常启动。同时，HBase需要集群部署，我们分别把HBase 部署到主机：guoyansi128 guoyansi129 guoyansi1301.下载hbase-1.2.4-bin.tar.gz;并且上传到/usr/local/src中2.解压缩并
转载
2023-05-22 13:22:46
34阅读
实验目的要求 目的：1、HBase的高可用完全分布模式的安装和验证要求：完成HBase的高可用完全分布模式的安装；HBase的相关服务进程能够正常的启动；HBase控制台能够正常使用；表创建、数据查询等数据库操作能够正常进行； 实验环境
转载
2023-07-20 22:51:35
167阅读
一、前提条件服务器配置好，搭建大数据集群服务器看这篇：搭建学习使用的大数据集群环境：windows使用vmware安装三台虚拟机，配置好网络环境
安装好对应版本的hadoop集群，并启动安装好对应版本的zookeeper集群，并启动1. HBase集群安装部署1.1 准备安装包下载安装包并上传到node01服务器安装包下载地址：http://archive.cloudera.com/cdh5/cd
转载
2023-08-09 00:39:33
111阅读
本文主要记录了 Kafka 线上环境集群部署考虑因素以及非常非常重要的 Kafka 参数配置讲解。1. 概述Kafka 生产环境的一些注意事项，包括集群部署的考量和 集群配置参数的设置等，具体见下图：2. 集群部署2.1 操作系统主要为以下 3 方面：I/O 模型的使用
Kafka 客户端底层使用了 Java 的 selector，selector 在 Linux 上的实现机制是 epoll
转载
2024-04-25 11:07:48
78阅读
