1 什么是FlinkXFlinkX是在是袋鼠云内部广泛使用的基于flink的分布式离线数据同步框架，实现了多种异构数据源之间高效的数据迁移。不同的数据源头被抽象成不同的Reader插件，不同的数据目标被抽象成不同的Writer插件。理论上，FlinkX框架可以支持任意数据源类型的数据同步工作。作为一套生态系统，每接入一套新数据源该新加入的数据源即可实现和现有的数据源互通。 2 工作原理
转载
2024-08-20 17:40:12
118阅读
目录测试环境Hadoop 组织框架HDFS架构YARN架构HA集群部署规划自动故障转移关于集群主机时间Linux环境搭建配置Java环境安装单机版HadoopZookeeper集群安装配置环境变量关闭防火墙修改hosts文件配置SSH免密登录修改Hadoop配置文件Hadoop集群的初始化Hadoop集群的启动测试环境Linux系统版本：CentOS 7 64位Hadoop版本：hadoop-2.
转载
2023-10-09 22:10:34
109阅读
一、在虚拟机中安装CentOS71、 启动一个虚拟机管理软件（vmware或者virtual box），准备好CentOS7的镜像，如：CentOS-7.0-1406-x86_64-DVD.iso。具体操作可参考：1.2 VirtualBox实现宿主机与虚拟机，虚拟机与外网的互通。 2、配置hosts vi /etc/hosts 配置本机的hostname到ip地址的映射 3、关闭虚拟机上的防火墙
转载
2024-04-17 16:57:20
49阅读
这章将在虚拟机中的centos7系统上搭建hadoop分布式平台，从网络环境配置，到jdk环境配置，到hadoop平台的搭建。解决centos7中Network is unreachable问题，主机与虚拟机互ping不通问题，删除自带java，安装配置jdk。hadoop集群的规模：一个namenode 2个 datanode,共需要3台系统.[centos7卸载自带jdk]centos7系统在
转载
2023-10-09 22:11:56
132阅读
CentOS7搭建MySQL和Redis服务为什么不直接搭建高版本的呢？因为有些公司的环境就是低版本的，这些低版本的环境也需要学会如何搭建。准备工作搭建一个CentOS7系统第一步：先下载一个CentOS7的iso文件点击直接下载：https://mirror.xtom.com.hk/centos/7.9.2009/isos/x86_64/CentOS-7-x86_64-DVD-2009.iso第
转载
2024-04-01 13:52:24
185阅读
Zookeeper集群搭建 描述：本章节主要单服务器搭建集群，在一个服务器上启动多个不同端口的zookeeper服务，非真实环境。 真实环境下zookeeper集群会搭建在多个物理服务器上，并非单一的服务器，但搭建方式一样。 一、zookeeper安装 教程参考：https://www.cnblog
转载
2020-01-06 15:59:00
150阅读
2评论
KubernetesKubernetes 及其整个生态系统（工具、模块、插件等）均使用 Go 语言编写，从而构成一套面向 API、可高速运行的程序集合，这些程序文档精良、易于参与贡献或在其上构建应用程序。（百度百科）那么 Kubernetes有什么用？其实很简单，Docker是部署我们的项目的容器，可是一个容器部署不够，如果在多个Linux服务器中使用Docker创建容器，这样就需要将多个Linu
转载
2021-04-09 15:44:53
254阅读
故障描述使用这个加密时候就出现Illegalkeysize错误，查阅资料知道了如果密钥大于128,会抛出上述异常。因为密钥长度是受限制的,java运行时环境读到的是受限的policy文件，文件位于/jre/lib/security下,这种限制是因为美国对软件出口的控制。Java默认使用的解密包是local_policy.jar和US_export_policy.jar，但是这个默认的只支持128位
原创
2021-04-25 11:34:32
665阅读
点赞
KubernetesKubernetes及其整个生态系统（工具、模块、插件等）均使用Go语言编写，从而构成一套面向API、可高速运行的程序集合，这些程序文档精良、易于参与贡献或在其上构建应用程序。（百度百科）那么Kubernetes有什么用？其实很简单，Docker是部署我们的项目的容器，可是一个容器部署不够，如果在多个Linux服务器中使用Docker创建容器，这样就需要将多个Linux服务器的
原创
2021-03-02 20:14:58
255阅读
环境准备：Centos7（2核、master内存3GB、slave内存2GB）搭建概述：先将一台虚拟机搭建为master、随后克隆出两台虚拟机作为从节点虚拟机主机名和IP地址：主机名IP地址master192.168.138.110slave1192.168.138.111slave2192.168.138.1121. 虚拟机配置注：以下是配置master主节点虚拟机，slave从节点会在后续进行
原创
2023-12-12 21:58:16
133阅读
# 在CentOS 7上搭建Redis集群
## 简介
Redis是一个开源的内存数据库，可以用于数据缓存、消息队列等多种用途。在分布式系统中，搭建Redis集群可以有效提高系统的性能和可靠性。本文将介绍如何在CentOS 7上搭建Redis集群。
### 步骤概览
以下是搭建Redis集群的大体步骤，具体步骤和代码示例将在下文详细说明：
| 步骤 | 描述
原创
2024-04-30 09:44:33
46阅读
# 搭建CentOS7 Redis集群教程
## 1. 整体流程
```mermaid
flowchart TD;
A[准备环境] --> B[安装Redis]
B --> C[配置Redis]
C --> D[启动Redis集群]
```
## 2. 准备环境
首先，你需要确保你的CentOS7服务器已经安装了Docker和Docker Compose。如果没有安
原创
2024-05-06 05:08:20
35阅读
文章目录CkickHouse 版本安装包下载安装zk集群搭添加zk配置测试常见问题 CkickHouse 版本20.3.10.75-2安装包下载wget https://repo.yandex.ru/clickhouse/rpm/stable/x86_64/clickhouse-client-20.3.10.75-2.noarch.rpm
wget https://repo.yandex.r
# 搭建OpenStack集群教程
## 一、整体流程
首先，我们来看一下搭建OpenStack集群的整体流程，具体步骤如下表所示：
| 步骤 | 操作 |
| ---- | ---- |
| 1 | 安装CentOS 7操作系统 |
| 2 | 安装OpenStack软件包 |
| 3 | 配置OpenStack网络 |
| 4 | 创建OpenStack服务 |
| 5 | 验证Open
原创
2024-05-19 03:32:42
94阅读
下载：https://redis.io/解压：tar-xzfredis-5.0.3.tar.gz进入目录：cdredis-5.0.3编译安装：make创建配置文件夹：mkdir-p/usr/local/redis/redis_1mkdir-p/usr/local/redis/redis_2mkdir-p/usr/local/redis/redis_3mkdir-p/usr/local/redis/
原创
2019-01-06 07:54:03
2056阅读
系统环境HostnameIP应用zk-master10.15.5.240zookeeperzk-node110.15.5.241zookeeperzk-node210.15.5.242zookeeper系统版本：CentOS Linux release 7.6.1810 (Core)JDK版本：
原创
2022-02-18 16:49:20
164阅读
一、规划 主机名 主机IP 磁盘配比 角色 node1 public-ip：10.0.0.130cluster-ip:192.168.2.130 sda,sdb,sdcsda是系统盘，另外两块数据盘 ceph-deploy,monitor,mgr,osd node2 public-ip：10.
原创
2022-03-16 14:44:30
602阅读
Redis是一个开源的使用ANSI C语言编写、遵守BSD协议、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API。它通常被称为数据结构服务器，因为值（value）可以是 字符串(String), 哈希(Hash), 列表(list), 集合(sets) 和 有序集合(sorted sets)等类型。-redis作用:可以减轻数据库压力，查询内存比查询数据库效
原创
2021-04-09 19:15:38
109阅读
kafka集群部署
原创
2018-05-08 15:48:05
2417阅读
点赞
CentOS7搭建Ceph集群
Ceph是一个免费、开源的分布式存储系统，可以提供高性能、高可靠性的存储解决方案。在企业和云环境中，Ceph集群已经被广泛应用。本文将介绍如何在CentOS7上搭建Ceph集群，以实现可扩展的分布式存储。
首先，确保CentOS7服务器已经安装并配置好。在开始搭建Ceph集群之前，请先打开服务器终端，并确保你的服务器已经联网，并可以通过互联网访问。
以下是Ce
原创
2024-02-01 10:48:40
114阅读
