前人种树后人乘凉，以下内容大部分内容是李振良老师进行编写，原文章使用虚拟机环境，我基于腾讯云服务器cvm的操作验证，在文档基础上修改了部分内容1. 安装要求在开始之前，部署Kubernetes集群机器需要满足以下几个条件：一台或多台机器，操作系统 CentOS7.x-86_x64硬件配置：2GB或更多RAM，2个CPU或更多CPU，硬盘30GB或更多集群中所有机器之间网络互通可以访问外网，需要拉取
转载
2023-10-08 12:57:20
111阅读
目录一、Hadoop集群规划二、配置样板节点1、虚拟机硬件信息2、本地登录配置（1）root用户登录（2）关闭防火墙（3）修改主机名和IP地址（4）配置hosts（5）创建用户设置密码（6）添加sudo权限（7）切换用户验证sudo命令（8）创建软件安装目录3、远程登录配置（1）Xshell远程登录（3）安装jdk和hadoop（4）修改hadoop配置文件（5）配置主机免密登录三、克
转载
2024-02-02 18:10:30
261阅读
转载
2021-07-27 16:12:51
229阅读
虚拟机环境配置##集群规划jiqunguihua.png853×356 18.3 KB元数据服务存储##网卡配置vi PROTO=sta..
转载
2021-07-27 16:12:54
192阅读
虚拟机环境配置##集群规划jiqunguihua.png853×356 18.3 KB元数据服务存储##网卡配置vim /etc/sysconfig/network-scripts/ifcfg-eth0内容如下：
转载
2022-04-13 14:05:34
257阅读
在进行大数据集群搭建之前，首先需要明确整个流程和每个步骤需要做什么。下面是一份简单的指南表格，帮助你理解大数据集群搭建的流程：
| 步骤 | 操作 | 代码示例 |
|------|---------------------|----------------------------|
| 1 | 准备集群节点
原创
2024-04-30 10:54:29
130阅读
2018 年 7 月份，青云在 Cloud Insight 云计算峰会上推出了一款全新的容器平台——KubeSphere，旨在帮助企业快速低成本管理容器。并且 KubeSphere 本身是开源的，它是基于 Kubernetes 构建的分布式、多租户、企业级开源容器平台，具有强大且完善的网络与存储能力，并通过极简的人机交互提供完善的多集群管理、CI / CD 、微服务治理、应用管理等功能，帮助企业在
转载
2024-01-25 22:18:01
33阅读
案例一 Traefik Operator开发1.kubebuilder 创建项目2.Crontroller开发与部署Operator使用场景Operator Frameworkhttps://operatorhub.io K8s常见的2种二次开发模式 Client-go: 与普通SDK使用别无二样 Operator: 是一套k8s 功能扩展框架开发环境准备 kubebuilder 介绍
转载
2023-12-05 19:42:48
153阅读
clickhouse是什么？clickhouse集群搭建刚开始搭建集群的时候，发现有很多相关的博客，但是难过的是都不太完整，跟着博客操作总是达不到效果，最后自己也是根据官网的doc一步步的进行，读文档，读配置文件，如果你跟着博客已经失败了2次，那么我觉得你应该看官网的文档了。clickhouse官方集群部署文档过程梳理1单机部署clickhouse-server2修改配置文件，添加metrika.
转载
2023-09-21 11:54:56
69阅读
二、Hadoop集群搭建2.1、Hadoop安装将Hadoop安装包导入hadoop102的/opt/software文件夹下将Hadoop安装包解压至/opt/module文件夹下[atguigu@hadoop102 software]$ tar -zxvf hadoop-3.1.3.tar.gz -C /opt/module/配置Hadoop的环境变量在/etc/profile.d/my_en
转载
2023-11-11 20:41:10
83阅读
环境服务器配置：CPU型号：CPU核素：内存：操作系统版本：CentOSLinuxrelease7.5.1804(Core)主机列表：192.168.0.101node1192.168.0.102node2192.168.0.103node3192.168.0.104node4192.168.0.105node4软件路径：/data/toolsjdk版本：1.8JAVA_HOME路径：/opt/j
原创
2018-05-30 14:47:43
7445阅读
创建spark用户组，组ID1000groupadd-g1000spark在spark用户组下创建用户ID2000的spark用户获取视频中文档资料及完整视频的伙伴请加QQ群：947967114useradd-u2000-gsparkspark设置密码passwdspark修改sudo权限chmodu+w/etc/sudoersvi/etc/sudoers找到rootALL=(ALL)ALL添加s
原创
2018-12-01 14:41:23
623阅读
原创
2021-07-20 21:19:20
450阅读
一、大数据的价值和应用 从2G到3G，再到现在的4G以及即将到来的5G，互联网已经成为绝大多数人生活中不可或缺的必须品。社交平台如微博、Facebook，购物平台如淘宝、亚马逊，移动支付如支付宝、applepay。诸如此类的平台随着手机智能化和移动技术的发展，“数据”的来源范围和数量呈指数级的增长。换句话说，我们每个人每天每时每刻都在创造“数据”，甚至连我们本人都是一条“数据”，只不过更复杂。而
创建spark用户组，组ID1000groupadd -g 1000 spark在spark用户组下创建用户ID 2000的spark用户 获取视频中文档资料及
原创
2024-02-22 17:41:27
19阅读
在大数据领域，大数据平台集群搭建是非常重要且常见的操作。在现代化的大数据处理中，使用Kubernetes（K8S）进行集群搭建可以帮助我们更好地管理和部署大数据应用。在本文中，我将向您介绍如何使用K8S搭建大数据平台集群，并给出相应的代码示例。
**整体流程**
首先，让我们看一下搭建大数据平台集群的整体流程。下表将展示具体步骤：
| 步骤 | 操作 |
|------|----
原创
2024-05-17 11:51:49
123阅读
搭建大数据集群环境是在处理大规模数据时常见的一个需求，在Kubernetes（简称K8S）中也可以很好地实现。Kubernetes是一个用于自动部署、扩展和管理容器化应用程序的开源平台，它能够提供一个高效、可靠的容器编排解决方案，从而方便我们搭建一个大数据集群环境。
整个搭建大数据集群环境的流程可以分为以下几个步骤：
| 步骤 | 操作 |
| ---- | ---- |
| 1 | 准备Ku
原创
2024-05-17 11:51:36
96阅读
学习大数据，hadoop集群搭建是第一步的，方便后面执行测试代码，调试环境。资源有限，这里采用windows上使用虚拟机，VMware。文章目录环境环境搭建环境虚拟机：VMware18环境：ubuntu，jdk1.8，hadoop2.7这里使用ubuntu，有些webui的东西可以看到，方便学习。jdk使用8，最普遍版本。环境搭建...
原创
2021-11-08 16:34:30
10000+阅读
学习大数据，hadoop集群搭建是第一步的，方便后面执行测试代码，调试环境。资源有限，这里采用windows上使用虚拟机，VMware。文章目录环境环境搭建环境虚拟机：VMware18环境：ubuntu，jdk1.8，hadoop2.7这里使用ubuntu，有些webui的东西可以看到，方便学习。jdk使用8，最普遍版本。环境搭建...
原创
2022-01-18 10:54:58
80阅读
# Docker大数据集群搭建教程
## 概述
在本教程中，我们将教会你如何使用Docker搭建大数据集群。这个过程需要一定的经验和知识，但是只要跟着步骤一步步来，你将可以轻松完成搭建。
## 流程图
```mermaid
flowchart TD
Start(开始)
Step1(下载Docker镜像)
Step2(配置集群)
Step3(启动容器)
S
原创
2024-04-13 04:55:58
63阅读
