文章目录docker-compose启动方式(docker run方式懒得写了 自己去钻研)这里先奉上docker hub仓库 地址 [docker hub地址超链接]( https://hub.docker.com/r/yujiangxian/hadoop-ha-zk)先配置docker-compose.yml文件(端口配置自己看)接下来不用多说,老规矩,进入命令行docker-compose
注意：本人是阿里云的机器，系统是centOS 8 ，已经提前安装docker。一、首先安装hadoop镜像 1、 在docker中查找hadoop 镜像docker search hadoop2、 选择star数量最多的镜像拉取就可以docker run --name hadoop1 -d -h master docker.io/sequenceiq/hadoop-d
转载
2023-07-28 00:25:08
346阅读
# 使用 Docker 部署单机版 Hadoop 的教程
本文旨在指导初学者如何使用 Docker 快速部署一个单机版的 Hadoop 环境。我们将会分步骤进行讲解，并加以代码示例及详细的注释。本文结构包括整体流程、每一步的详细说明，以及一些可视化图表如类图和饼状图。
## 整体流程
我们可以将部署过程划分为以下几个步骤：
| 步骤编号 | 步骤描述 |
|--
文章目录Swarm -- Docker的调度工具简介一、安装docker二、安装Swarm单机版1.拉取swarm镜像2.搭建Swarm环境3.确认Swarm单机版搭建是否成功三、安装Swarm双机版1.新结点加入Swarm2.启动管理机3.确认双机版搭建是否成功四、在Swarm双机版部署服务1.部署服务到Swarm双机版2.查看服务部署情况3.扩展服务到多节点总结及展望 Swarm – Doc
转载
2024-09-23 12:00:20
71阅读
下载hadoop-2.7.7.tar.gz配置ssh无密码登录# 测试ssh localhost, 默认需要密码[root@node1 hadoop]# ssh localhostThe authenticity of host 'localhost (::1)' can't be established.ECDSA key fingerprint is SHA256:Ii9RadytomW4X2LEvMQwRxoOTeGgxfNbOgwXrc/wwZI.ECDSA key fingerp
原创
2021-06-04 19:09:07
930阅读
创建用户名hadoop 提高hadoop权限，输入vim /etc/sudoers 添加hadoop ALL=(root) NOPASSWD:ALL 使用sudo可以不用输入密码查看hadoop账号 设置网络输入sudo vi /etc/sysconfig/network-scripts/ifcfg-ens33 修改文件 BOOTPROTO=dhcp 为动态分配的ip 修改结果如下图//永久性的修
准备工作 Hadoop环境搭建： 1.主机名 2.防火墙关闭 3.免密登录 （ssh-keygen 按4个回车后 ssh-copy-id root@虚拟机主机ip） 4.Jdk（具体安装步骤可以看上一篇文章）正式搭建步骤 开启虚拟机，进入hadoop目录下 1、vim hadoop-env.sh 1.1、Line 25: 修改JAVA_HOME=jdk的安装目录 2.2、Li
Ubuntu、centos7、6集群搭建： 一、准备阶段1. 1、创建用户
# useradd -m hadoop -s /bin/bash
-m：自动建立用户的登入目录；
-s：指定用户登入后所使用的shell； /bin/bash/ 作为shell
shell只是用户与系统沟通的接口，各种不同的s
转载
2024-10-12 12:05:51
158阅读
1下载hive2安装2.1上载和解压缩2.2配置环境变量2.3对hive进行配置2.3.1 hive-site.xml相关的配置2.3.1.1新建hive-site.xml文件2.3.1.2使用hadoop新建hdfs目录2.3.1.3检查hdfs目录是否创建成功2.3.1.4修改hive-site.xml中的临时目录2.3.1.5修改hive-site.xml数据库相关的配置2.3.1.6将My
转载
2023-09-14 08:31:54
0阅读
如何实现Hadoop单机版
Hadoop是一个用于处理大规模数据的开源框架，它提供了分布式存储和分布式处理能力。在学习Hadoop之前，我们可以先尝试在单机上搭建一个Hadoop的环境，这有助于我们更好地理解Hadoop的工作原理和基本概念。接下来，我将向你介绍如何在单机上搭建Hadoop的环境。
整个过程可以分为以下几个步骤：
1. 安装Java环境
2. 下载Hadoop
3. 配置Ha
原创
2024-01-20 08:05:09
58阅读
# 如何使用Docker部署Redis单机版
## 简介
在本文中，我们将介绍如何使用Docker容器部署Redis单机版。Redis是一个开源的内存数据库，可以用作缓存、消息中间件和持久化存储等用途。Docker是一个轻量级的容器化平台，使得部署和管理应用程序变得更加简单和高效。
## 步骤概览
以下是部署Redis单机版的步骤概览：
| 步骤 | 操作
原创
2024-05-29 10:43:18
2229阅读
环境：centos7.61、ceph概论解析Ceph 存储集群至少需要一个 Ceph Monitor 和两个 OSD 守护进程。而运行 Ceph 文件系统客户端时，则必须要有元数据服务器( Metadata Server )Ceph OSDs: Ceph OSD 守护进程( Ceph OSD )的功能是存储数据，处理数据的复制、恢复、回填、再均衡，并通过检查其他OSD 守护进程的心跳来向
## Docker部署单机版Nacos教程
### 介绍
Nacos是阿里巴巴开源的一款服务发现和配置管理工具，它提供了类似于Consul和Etcd的功能，但更加轻量级和易用。本文将教会初学者如何使用Docker来部署Nacos的单机版。
### 整体流程
下面是部署单机版Nacos的整体流程，可以参考以下表格：
| 步骤 | 描述 |
| --- | --- |
| 1 | 配置Docke
原创
2023-07-22 11:41:54
384阅读
游戏：三张牌(理论分析+py3模拟)序言: 本文将全面剖析一款民间风靡游戏，三张牌。0. 规则 游戏使用一副除去大小司令的扑克牌，即 A, 2, 3, 4, 5 ,6, 7, 8, 9, 10, J, Q, K，共计 13 种牌型，每种牌型 4 种花色，总计 52 张牌。比牌规则为单牌，A > K > Q > … > 2牌型, 豹子 > 顺金 > 金花 >
文章目录一、简介1.1 nacos简介1.2 相关链接二、环境准备2.1 基础环境部署2.2 下载SQL文件2.3 创建数据和配
原创
2022-01-15 09:41:23
1306阅读
文章目录一、环境二、运行zookeeper集群镜像三、配置环境变量四、修改配置文件（三台服务器同步操作）4.1 修改hadoop-env.sh文件4.2 修改core-site.xml文件4.3 修改yarn-site.xml文件4.4 修改mapred-site.xml文件4.5 修改hdfs-site.xml文件（master）4.6 修改hdfs-site.xml文件（slave1）4.7
操作系统操作系统：Centos7.6Consul集群地址（阿里云按量计费）：IPNode外网IP172.18.221.120server1118.31.173.29172.18.221.121server2118.178.84.137172.18.221.122server347.99.180.118Kong地址（阿里云按量计费）：IP外网IP172.18.221.123116.62.10.11关
转载
2024-09-19 19:50:46
57阅读
# 使用Docker部署单机版Kafka
## 流程图
```mermaid
flowchart TD
A(准备工作) --> B(创建Docker镜像)
B --> C(Docker运行容器)
C --> D(创建Kafka Topic)
D --> E(发送和接收消息)
```
## 准备工作
在开始部署单机版Kafka之前，首先需要确保你的开发环境中已
原创
2023-10-12 09:17:41
152阅读
# Docker部署Flink单机版
在大数据处理中，Flink是一个非常受欢迎的流式处理框架。它提供了高效、可扩展和容错的数据处理能力。为了方便使用和部署，我们可以使用Docker来部署Flink的单机版。
## Docker简介
Docker是一种容器化技术，它可以将应用程序及其依赖项打包成一个可移植的容器。这些容器可以在不同的环境中运行，而无需担心环境差异导致的兼容性问题。
通过使用
原创
2023-08-23 09:06:46
805阅读
# Docker部署SkyWalking单机版教程
## 一、整体流程
下面是部署SkyWalking单机版的整体流程：
| 步骤 | 描述 |
| --- | --- |
| 1 | 部署Docker环境 |
| 2 | 拉取并运行SkyWalking镜像 |
| 3 | 配置SkyWalking |
| 4 | 启动SkyWalking |
| 5 | 验证SkyWalking部署 |
原创
2023-10-12 09:17:57
138阅读
