1.HBase安装配置，使用独立zookeeper，shell测试 安装步骤：首先在Master(shizhan2)上安装：前提必须保证hadoop集群和zookeeper集群是可用的 1.上传：用工具将hbase安装包hbase-0.99.2-bin.tar.gz上传到：/data/software/目录下 2.解压：tar -xzvf hbase-0.99.2-bin.tar.
转载
2023-09-01 14:40:40
81阅读
# HBase 单节点部署机器配置
HBase 是一种基于 Hadoop 的分布式、可伸缩的 NoSQL 数据库。它能够处理大规模数据集，并提供高吞吐量和低延迟的随机读写能力。在开始部署 HBase 单节点之前，我们需要确保机器的配置满足最低要求。
## 机器配置要求
HBase 单节点部署需要至少一个机器来运行 HBase Master 和 HBase RegionServer。以下是最低
原创
2023-10-17 11:56:16
113阅读
常见的组件最大QPS，mysql单机1000QPS，Redis单机10万QPS。订单服务：100万日活，十几qps，服务器3台。秒杀服务：峰值20+万qps，平常5~6万qps。商品20，货量最大值200，限流5千qps，15台机器,。
原创
2023-05-09 07:42:34
155阅读
目录1.EFK 日志收集系统介绍2.EFK 架构部署之安装 Elasticsearch3.EFK 架构部署之安装Kinaba4.EFK 架构部署之安装Logstash5.EFK 架构部署之安装Kafka6.EFK 架构部署之安装Filebeat1. EFK 日志收集系统介绍 在日常维护中，每次线上服务器的Nginx或PHP遇到报
Ceph机器配置：构建高性能的分布式存储系统
随着数据量的不断增加，对于存储系统的需求也在不断提高。为了应对这一挑战，越来越多的企业和组织转向分布式存储解决方案，其中一种备受关注的技术就是Ceph。Ceph是一个开源的分布式存储系统，以其高性能、高可靠性和可扩展性而备受业界赞誉。在使用Ceph构建分布式存储系统时，合理的机器配置是至关重要的一步。
Ceph是基于对象存储的，所以在配置Ceph机
原创
2024-02-04 12:39:21
99阅读
在进行RedisShake机器配置时，我们需要充分了解配置要求、操作流程及配置参数，以确保Redis的高效运作。RedisShake是一款用于数据迁移和复制的工具，适合用在Redis生态中。以下是我整理的完整解决方案，涵盖了环境准备、分步指南、配置详解、验证测试、优化技巧及扩展应用。
### 环境准备
为了顺利运行RedisShake，您需要准备相应的软硬件环境。以下是推荐的配置要求：
|
首先下载ElasticSearch，下载地址：https://www.elastic.co/downloads/elasticsearchJDK版本要1.8以上，低版本的JDK，ES无法支持需要下载的ELK组件如下所示：安装配置Elasticsearchtar -zxvf elasticsearch-5.2.2.tar.gz -C /soft/services
cd /soft/services/
转载
2024-07-15 11:30:47
33阅读
硬件准备环境：硬盘： 16块 SAS 15K RAID5 带512MCacheCPU： AMD 4核两颗内存： 16G软件环境：操作系统： RedHat AS4.6 2.6.9硬件准备环境：硬盘： 16块 SAS 15K RAID5 带512MCacheCPU： AMD 4核两颗内存： 16G软件环境：操作系统： RedHat AS4.6 2.6.9-67.ELsmpMysql: 5.0下面分别根
转载
2024-07-22 10:23:18
97阅读
hadoop 0.23.0比先前的0.20版本有了很大的改动，而我目前最感兴趣的还是HDFS部分的federation部分，由于相关配置资料比较少，下面就把这两天配置情况总结一下作为备忘：要配置hdfs，关键要知道namenode、datanode、secondarynamenode、backupnode都需要什么配置，下面分别来讨论一下：1、namenode1）需要一些目录放置fsimage
我们有一个简单便宜的 LVS-DR 的设置。二台机器(服务器)，二台都运行着数据库的服务。外面请求过来的这些流量导向本地机器的服务器或其他服务器。因为纯 4 层调度，这是我最喜欢的方式。因为节约，我这次想直接要这二台服务器上运行 LVS 的服务。不在通过其它的机器。所以使用 keepalived 来配置，做个主从，也同时在这个机器上。是个很完美的方案。但是，我让同事帮着配置，一直不能正常的工作。下
Linux安装：1.下载iso镜像2.UltralISO写入镜像到U盘（注意U盘一定要是FAT32的不然像NTFS的都是不能识别的）3.写入后就行了，不要删除什么东西，也不用再将ISO拷贝进来了3.进入电脑BIOS设置U盘为第一启动（开机按F2进入BiOS）4.开始安装前修改，按Tab键： vmlinuz initrd=initrd.img inst.stage2=hd:LABEL=CentOS\
● Based on the recommendations mentioned above, Let's assign 5 core per executors => --executor-cores = 5 (for good HDFS throughput) ● Leave 1 core pe
转载
2018-07-09 23:37:00
130阅读
2评论
# Java获取机器配置
在开发Java应用程序时，有时候需要获取机器的配置信息，比如CPU核心数、内存大小等，以便优化程序性能或做出一些特定的处理。本文将介绍如何使用Java代码获取机器的配置信息。
## 获取CPU核心数
要获取机器的CPU核心数，可以使用Java的Runtime类的availableProcessors()方法。这个方法返回当前机器的CPU核心数。
```java
i
原创
2024-04-23 06:14:09
29阅读
克隆虚拟机——在此我只克隆了一个虚拟机，因为设置Hadoop集群暂且只需克隆一个，如有需要可以根据需求多克隆几个，后面步骤带有克隆的虚拟机的多做一个虚拟机的操作即可首先先关闭虚拟机Master，再选中Master右键选择设置-克隆名称和位置自己改变修改主机名vi /etc/hostname增加主机名到文件中，然后重启服务器注意！两个虚拟机都需要增加对应的主机名#localhost.lo
hadoop集群搭建01--hadoop 的安装配置三台机器 Centos 7192.168.2.37 计算机名称 master 192.168.2.38 计算机名称 slave1 192.168.2.39 计算机名称 slave2版本 zookeeper-3.4.13 Hadoop-2.7.7 Hbase-2.1.0 apache-hive-2.1.1
转载
2023-09-18 21:27:41
119阅读
目录1.Namenode多目录配置2.Datanode多目录配置2.1 Datanode配置多目录的必要性2.2 Datanode配置多目录2.2 Datanode多目录数据平衡3.启动namenode和datanode多目录配置集群 1.Namenode多目录配置Namenode数据（操作日志文件，镜像文件等）存储路径可以配置多个不同路径，这些路径里面存储的数据相同。主要用作数据备份。 在hd
转载
2023-07-12 12:53:05
572阅读
高并发MySQL机器配置
随着互联网的发展，高并发访问成为了许多网站和系统所面临的一个重要问题。而MySQL作为目前最流行的关系型数据库之一，对于高并发访问的支持显得尤为重要。本文将介绍如何配置高并发MySQL机器，并提供一些代码示例来帮助读者更好地理解。
## 1. 数据库服务器硬件配置
在配置高并发MySQL机器之前，首先需要考虑数据库服务器的硬件配置。以下是一些常见的配置建议：
-
原创
2023-11-13 04:23:51
174阅读
一、Redis现有同步策略1、增量同步功能组成部分1） 主服务器的复制偏移量和从服务器的复制偏移量； 主服务器每次向从服务器传播N个字节的数据时，就将自己的复制偏移量的值加N； 从服务器每次收到主服务器传播来的N个字节的数据时，就将自己的复制偏移量的值加上N。2） 主服务器的复制积压缓冲区；由主服务器维护的一个固定长度队列，默认为1
前言在安装MySQL的时候会遇到很多问题，博客上有很多解决问题的办法，在这里我附上一些链接，遇到问题的朋友们可以阅读参考哈~本文主要针对于刚接触数据库的小白，来安装MySQL数据库。目前官网上的MySQL版本有5.5，5.6，5.7和8，在开发的时候我们一般要选择比最新版低1到2个版本的，因此我选择了5.7作为要安装的数据库下载步骤2.下载对应的版本点击上图的MySQL Community Ser
目录浮点数的表示浮点数加减法运算过程由于浮点数尾数的小数点均固定在第一位数值前，可以预见浮点数的运算实质上是定点数运算。但是由于阶码的不同，尾数对应小数点位置实际是不同的，需要通过转化使小数点对齐后，才能直接进行加减运算。浮点数加减运算大致可以分为如下几步：对阶：使两小数点位置对齐尾数运算：尾数进行加减运算规格化：为增加有效数字尾数，提高运算精度，必须对其进行尾数规格化舍入：规格化过程可能丢失有效
