一、前言阿昌在这里总结记录一下，如何通过docker搭建redis哈希槽分区解决方案的集群【3主3从】涉及知识：redisdocker基本指令linux哈希槽分区二、理论在开始搭建之前搭建需要知道3种在redis集群搭建的分区算法，分别为：哈希取余分区、一致性哈希算法分区、哈希槽分区1、哈希取余分区描述图介绍通过对key取余来直接确定他存放或读取拿个redis。2亿条记录就是2亿个k,v，我们单机
转载
2023-08-18 16:35:45
169阅读
一、常规方法搭建1.拉取镜像#拉取最新的镜像
docker pull zookeeper2.创建 bridge 网络Docker创建容器时默认采用bridge网络，自行分配ip，不允许自己指定。在实际部署中，我们需要指定容器ip，不允许其自行分配ip，尤其是搭建集群时，固定ip是必须的。我们可以创建自己的bridge网络 ： mynet，创建容器的时候指定网络为mynet并指定ip即可。#创建自定
转载
2023-07-14 21:29:11
242阅读
—— 步骤 ——0. 背景1. 创建出第一个容器2. 为该容器配置 java 和 hadoop 环境3. 配置允许外界通过 ssh 连接容器4. 由该容器克隆出多个容器5. 为各个容器配置 ssh 免密登录6. 开始编写集群配置7. 启动集群2021-10-6 补充（务必看一下）好叭-- 我承认使用 nginx 进行代理是疏忽了，到后面使用 Java 访问集群的时候会出现问题 正确的方式应该是通过
转载
2024-05-19 06:22:57
112阅读
Docker 集群环境实现的新方式近几年来，Docker 作为一个开源的应用容器引擎，深受广大开发者的欢迎。随着 Docker 生态圈的不断建设，应用领域越来越广。云计算，大数据，移动技术的快速发展，加之企业业务需求的不断变化，紧随技术更新的步伐，导致企业架构要随时更改以适合业务需求。当前，越来越多的公司都已将以 Docker 为代表的容器技术用于企业级业务平台，比如：腾讯，京东，美团，新浪，阿里
转载
2023-09-06 13:53:11
68阅读
文章目录前言容器创建容器配置必做apt文件选做权限安全复制容器
docker都是直接下载装有hadoop的镜像，但是这次为了复习一下hadoop的搭建以及linux的使用，决定从零开始搭建一个完全分布式的集群。
VMware的时候，这一步特别麻烦，现在docker两行就搞定了。 首先拉取需要的镜像，我这里以ubuntu:18.04为例子
docker pull ubunt
转载
2023-07-14 20:51:12
68阅读
docker中配置redis集群首先介绍一下几种解决方案1、哈希取余分区2亿条记录就是2亿个k,v，我们单机不行必须要分布式多机，假设有3台机器构成一个集群，用户每次读写操作都是根据公式：hash(key) % N个机器台数，计算出哈希值，用来决定数据映射到哪一个节点上。优点简单粗暴，直接有效，只需要预估好数据规划好节点，例如3台、8台、10台，就能保证一段时间的数据支撑。使用Hash算法让固定的
转载
2023-07-11 13:44:17
120阅读
1. Docker的基础命令$ sudo yum install docker-io
$ sudo service docker start
$ sudo chkconfig docker on
$ sudo docker pull centos
$ sudo docker images centos
$ sudo docker run -i -t centos /bin/bash
删除：
do
前言为什么要用ElasticSearch？我们的应用经常需要添加检索功能，开源的Elastic Search是目前全文检索引擎的首选。它可以快速的存储、搜索和分析海量数据。ElasticSearch是一个分布式搜索框架，提供RestfulAPI，底层基于Lucene，采用多shard（分片）的方式保证数据安全，并且提供自动resharding的功能。 拉取ElasticSearch镜像在
转载
2024-07-23 20:45:32
171阅读
摘要吐血整理，搭建了两遍，亲测可用！！！ 我买的是阿里云2C4G的服务器，使用的是CentOS 7.7版本。在搭建过程中踩了不少坑，本篇文章希望对大家有用CentOS 7.7安装Docker查看内核版本(使用root用户登陆)uname -a把yum包更新到最新yum update安装需要的软件包yum install -y yum-utils device-mapper-persistent-d
转载
2024-02-14 21:23:56
61阅读
前言我们知道使用一个Dockerfile模板文件可以定义一个单独的应用容器，如果需要定义多个容器就需要服务编排。下面介绍Docker官方产品，Docker Compose。Dockerfile可以让用户管理一个单独的应用容器，而compose则允许用户在一个模板（yaml格式）中定义一组相关联的应用容器（被称为一个project，即项目）例如：一个web服务再加上后端的数据库服务容器等。一、Doc
转载
2023-08-04 23:14:41
63阅读
最近在学习大数据技术，朋友叫我直接学习Spark，英雄不问出处，菜鸟不问对错，于是我就开始了Spark学习。为什么要在Docker上搭建Spark集群Spark本身提供Local模式，在单机上模拟多计算节点来执行任务。但不知道什么思想在做怪，总觉得不搭建一个集群，很不完美的感觉。搭建分布式集群一般有两个办法：找多台机器来部署。（对于一般的学习者，这不是很现实，我就是这一般这种，没有资源
转载
2023-07-30 14:36:39
95阅读
# Docker Kettle 集群方案实现指南
## 1. 概述
在本文中，我们将介绍如何使用 Docker 来实现一个 Kettle 集群方案。Kettle 是一款开源的 ETL（Extract-Transform-Load）工具，能够提供数据的抽取、转换和加载功能。通过使用 Docker，我们可以轻松地部署和管理多个 Kettle 容器，从而实现高可用和负载均衡的集群方案。
## 2.
原创
2023-09-26 23:54:56
172阅读
pxc
原创
2022-03-09 11:17:22
74阅读
pxc
原创
2021-09-15 10:20:15
210阅读
基于redis搭建netty tcp通讯集群方案简介一、集群原理二、项目依赖三、部分代码 简介在实际应用中我们的tcp服务端经常会使用集群方式运行，这样增大了系统的性能和容灾，本文讲述简单的netty tcp服务端集群应用原理的部分代码，文章源码地址：https://github.com/itwwj/netty-learn.git中的netty-day08-cluster项目。一、集群原理服务端
转载
2023-08-08 11:32:25
242阅读
近几年来，Docker 作为一个开源的应用容器引擎，深受广大开发者的欢迎。随着 Docker 生态圈的不断建设，应用领域越来越广。云计算，大数据，移动技术的快速发展，加之企业业务需求的不断变化，紧随技术更新的步伐，导致企业架构要随时更改以适合业务需求。当前，越来越多的公司都已将以 Docker 为代表的容器技术用于企业级业务平台，比如：腾讯，京东，美团，新浪，阿里巴巴等互联网公司。数据的安全、Do
RabbitMQ本身是基于Erlang编写，Erlang语言天生具备分布式特性（通过同步Erlang集群各节点的erlang.cookie来实现）。因此，RabbitMQ天然支持集群，但不支持负载均衡。集群是保证可靠性的一种方式，同时可以通过水平扩展以达到增加消息吞吐量能力的目的。一、RabbitMQ集群原理---普通模式下图为集群的示例：上面图中采用三个节点组成了一个RabbitMQ的集群，Ex
转载
2023-09-18 05:23:19
75阅读
一、MQ集群1.1集群分类RabbitMQ是基于Erlang语言编写的，而Erlang又是一个面向并发的语言，天然支持集群模式。RabbitMQ的集群有两种模式：普通集群：时钟分布式集群，将队列分散到集群的各个节点，从而提高整个集群的并发能力。镜像集群：是一种主从集群普通集群的基础上，添加了主从备份功能，提高了数据的可用性。镜像集群虽然支持主从,但主从同步并不是强一致的，某些情况下可能有数据丢失的
转载
2024-01-15 07:00:27
115阅读
# RabbitMQ Docker 集群部署方案
RabbitMQ 是一个开源的消息代理软件，用于实现高级消息队列协议（AMQP）。本文将介绍如何基于 Docker 部署 RabbitMQ 集群，适合需要高可用性和负载均衡的系统。
## 部署方案概述
在本方案中，我们将使用 Docker 进行 RabbitMQ 集群的部署。通过 Docker Compose 工具，我们可以快速编排不同的 R
原创
2024-10-07 03:27:57
51阅读
软件环境介绍 操作系统:Ubuntu server 64bit 14.04.1 Docker 版本 1.6.2 数据库:Mariadb 10.10 (Mariadb 是 MySQL 之父在 MySQL 被 Oracle 收购之后 创建的分支，性能上优于 MySQL 开源版本) 第一步 安装 Docker 对于 Ubuntu，建议直接联网安装 Docker 最新版本，apt-get 中版本较老。
转载
2024-06-08 23:05:00
73阅读
