前人种树后人乘凉，以下内容大部分内容是李振良老师进行编写，原文章使用虚拟机环境，我基于腾讯云服务器cvm的操作验证，在文档基础上修改了部分内容1. 安装要求在开始之前，部署Kubernetes集群机器需要满足以下几个条件：一台或多台机器，操作系统 CentOS7.x-86_x64硬件配置：2GB或更多RAM，2个CPU或更多CPU，硬盘30GB或更多集群中所有机器之间网络互通可以访问外网，需要拉取
转载
2023-10-08 12:57:20
111阅读
2018 年 7 月份，青云在 Cloud Insight 云计算峰会上推出了一款全新的容器平台——KubeSphere，旨在帮助企业快速低成本管理容器。并且 KubeSphere 本身是开源的，它是基于 Kubernetes 构建的分布式、多租户、企业级开源容器平台，具有强大且完善的网络与存储能力，并通过极简的人机交互提供完善的多集群管理、CI / CD 、微服务治理、应用管理等功能，帮助企业在
转载
2024-01-25 22:18:01
33阅读
目录一、Hadoop集群规划二、配置样板节点1、虚拟机硬件信息2、本地登录配置（1）root用户登录（2）关闭防火墙（3）修改主机名和IP地址（4）配置hosts（5）创建用户设置密码（6）添加sudo权限（7）切换用户验证sudo命令（8）创建软件安装目录3、远程登录配置（1）Xshell远程登录（3）安装jdk和hadoop（4）修改hadoop配置文件（5）配置主机免密登录三、克
转载
2024-02-02 18:10:30
261阅读
一、概述在 Hadoop 2.0.0 之前，一个集群只有一个 Namenode，这将面临单点故障问题。如果 Namenode 机器挂掉了，整个集群就用不了了。只有重启 Namenode ，才能恢复集群。另外正常计划维护集群的时候，还必须先停用整个集群，这样没办法达到 7 * 24 小时可用状态。Hadoop 2.0 及之后版本增加了 Namenode 高可用机制，这里主要讲 Hadoop HA o
原创
精选
2022-10-31 10:51:06
1317阅读
因为部门oa系统是多租户形式的部署在k8s中，平常只是解决k8s的一些常见错误，一直想认真研究一下 k8s的部署过程，毕竟知道其中的部署过程后边解决问题才能更快的解决，所以就找时间研究了一下。一、k8s常用组件master节点四个组件：apiserver、etcd、controllers、schedulernodes 节点三个组件：kubelet、kube-proxy、container runt
转载
2023-12-01 09:25:53
86阅读
# Kubernetes 与大数据的结合
Kubernetes 是一个开源的容器编排平台，广泛用于部署和管理容器化应用程序。结合大数据技术，Kubernetes 可以有效地支持数据处理、存储和分析。本文将带你了解如何在 Kubernetes 环境中实现大数据处理，并提供具体的步骤和代码示例。
## 整体流程概述
在实现 Kubernetes 大数据的过程中，我们可以按照以下步骤进行操作：
在云原生技术发展的浪潮之中，Kubernetes伴随着容器技术的发展，成为了目前云时代的“操作系统”。Kubernetes作为容器集群管理系统和云原生领域的关键项目，已经是云原生时代最需要理解与实践的核心技术。但技术的发展从来都不是一蹴而就，Kubernetes的诞生也有其对应的技术历史背景。目录一、 Kubernetes 是什么？1.云计算发展历程2.Kubernetes 是什么？3. 容器与虚
转载
2023-10-15 20:55:24
101阅读
目录kubernetes简介Kubernetes生态Kubernetes概述Kubernetes官网kubernetes简介kubernetes，简称K8s，是用8代替8个字符“ubernete”而成的缩写。是一个开源的，用于管理云平台中多个主机上的容器化的应用，Kubernetes的目标是让部署容器化的应用简单并且高效（powerful）,Kubernetes提供了应用部署，规划，更新，维护的一
Kubernetes大数据架构
在现代软件开发中，大数据处理越来越受到重视。为了有效管理和处理大规模的数据，我们需要使用一种可靠且高效的系统来管理和操作这些数据。Kubernetes（K8S）作为一个容器编排和管理平台，为大数据的处理提供了一个非常好的解决方案。
本文将介绍如何使用Kubernetes来构建一个大数据处理架构，并提供相应的代码示例。
构建大数据处理架构的流程如下图所示：
1
原创
2024-01-22 15:11:06
71阅读
标题：Kubernetes中实现容器大数据的关键词搜索
一、概述
Kubernetes是一个开源的容器编排引擎，常用于部署和管理容器化应用程序。容器大数据是指在海量数据中进行搜索和分析，以获取有价值的信息。本文将介绍如何在Kubernetes中实现容器大数据的关键词搜索，并提供相应的代码示例和说明。
二、实现步骤
以下是在Kubernetes中实现容器大数据关键词搜索的步骤：
| 步骤
原创
2024-01-23 10:09:23
60阅读
对于Kubernetes集群，监控的内容包含以下两个方面：●基础平台服务的监控实时监控核心组件（API Server、调度器、控制器、kubelet和kube-proxy等）的健康状态，用以发现用户流量和组件的CPU、内存和网络等的使用情况之间的联系。这些数据不仅能帮助我们甄别出单个组件是否服务异常，还能帮助运维者找出性能出现瓶颈的原因，保证组件有足够的资源满足用户请求，从而进行性能调
转载
2023-08-11 17:13:05
47阅读
文章目录Kubernetes1.集群方案2.安装搭建 Kubernetes 集群1.集群安装准备2.主控服务器3.下载离线文件，安装Docker4.工作节点二，配置集群安装环境三.Kubernetes安装kubernetes集群准备第一台虚拟机设置虚拟机cpu上传离线安装文件准备离线安装环境导入镜像准备三台服务器从第一台虚拟机克隆两台虚拟机在master上继续配置安装环境配置集群服务器的ip一键
转载
2024-06-10 20:24:44
50阅读
Volume是Pod中能够被多个容器访问的共享目录，它被定义在Pod上，然后被一个Pod里的多个容器挂载到具体的文件目录下，kubernetes通过Volume实现同一个Pod中不同容器之间的数据共享以及数据的持久化存储。Volume的生命容器不与Pod中单个容器的生命周期相关，当容器终止或者重启时，Volume中的数据也不会丢失。kubernetes的Volume支持多种类型，比较常见的有下面几
转载
2023-09-13 23:22:37
26阅读
一、StorageClass StorageClass作为对存储资源的抽象定义，对用户设置的PVC申请屏蔽后端的存储细节，一方面减少了用户对于存储资源细节的关注，另一方面减轻了管理员手工管理PV的工作，由系统自动完成PV的创建和绑定，实现了动态的资源供应。 StorageClass定义了包括主要名称、后端
转载
2023-10-08 10:01:58
112阅读
上文我们在一台虚机上演示了Kubernetes基于redis和docker的guestbook留言簿案例，本文我们将通过配置Kubernetes集群的方式继续深入研究。集群组件安装如下配置。 IPNAMEComponent192.168.56.103centos-masteretcd,kube-apiserver,kube-controller-manager,kube-scheduler192
转载
2024-08-29 19:39:05
28阅读
大数据平台是为了满足企业对于数据的各种要求而产生的。
大数据平台：是指以处理海量数据存储、计算及不间断流数据实时计算等场景为主的一套基础设施。典型的包括Hadoop系列、Spark、Storm、Flink以及Flume/Kafka等集群。既可以采用开源平台，也可以采用华为、星环等商业级解决方案，既可以部署在私有云上，也可以部署在公有云上。大数据新手学习交流群，如果有想学习大
转载
2023-08-15 21:07:45
103阅读
1.前期准备1.1系统和yum源镜像准备需要的条件：① 至少三台刚装上Centos7.0系统的物理机或者虚拟机；② CentOS-7.0-x86_64-bin-DVD1.iso镜像，用于制作本地yum源；注意：本文三台物理机或虚拟机的操作系统镜像是CentOS-7-x86_64-Minimal-1804.iso。用于制作本地yum源的CentOS-7.0-x86_64-bin-DVD1.
转载
2023-08-25 18:02:06
223阅读
案例一 Traefik Operator开发1.kubebuilder 创建项目2.Crontroller开发与部署Operator使用场景Operator Frameworkhttps://operatorhub.io K8s常见的2种二次开发模式 Client-go: 与普通SDK使用别无二样 Operator: 是一套k8s 功能扩展框架开发环境准备 kubebuilder 介绍
转载
2023-12-05 19:42:48
153阅读
文章目录一、存储卷基础1.emptyDir目录2.gitrepo目录3.hostPath目录4.nfs共享存储卷4.1.节点安装配置nfs4.2.node节点挂载4.3.测试NFS二、k8s的namespace概念三、PVC和PV1.PV概念与使用2.PVC的概念与使用3.PVC的阻塞四、statefulset控制器1.PV资源配置2.创建StatefulSet服务五、configmap与sec
转载
2023-10-16 21:11:50
87阅读
Kubernetes 多集群管理1.1 多集群管理定义多集群管理是指在多个 Kubernetes 集群上统一部署、调度、监控和管理应用程序的过程。它旨在提高应用程序的可用性、可扩展性和安全性，满足不同场景下的复杂需求。1.2 多集群管理应用场景多集群管理适用于以下场景：跨地域/数据中心部署: 在多个地域或数据中心部署应用程序，实现就近访问和容灾。高可用性应用: 通过多集群部署消
转载
2024-07-21 13:52:01
23阅读
