Kubernetes (K8s) 是一个用于自动部署，扩展和管理容器化应用程序的开源平台。本文将介绍如何使用Kubernetes部署Hadoop分布式文件系统（HDFS）。
### 一、部署Kubernetes集群
在使用Kubernetes部署HDFS之前，我们首先需要拥有一个可用的Kubernetes集群。如果还没有搭建Kubernetes集群，可以参考以下步骤进行搭建：
| 步骤 |
原创
2024-01-18 14:36:18
102阅读
Hadoop 02 核心介绍1. HDFSHDFS（Hadoop Distributed File System） 是一个 Apache Software Foundation 项目, 是 Apache Hadoop 项目的一个子项目. Hadoop 非常适于存储大型数据 (比如 TB 和 PB), 其就是使用 HDFS 作为存储系统. HDFS 使用多台计算机存储文件, 并且提供统一的访问接口,
转载
2024-09-05 18:12:24
55阅读
kubernetes，简称K8s，是用8代替8个字符“ubernete”而成的缩写。是一个开源的，用于管理云平台中多个主机上的容器化的应用，Kubernetes的目标是让部署容器化的应用简单并且高效（powerful）,Kubernetes提供了应用部署，规划，更新，维护的一种机制。1、传统的应用部署方式是通过插件或脚本来安装应用。这样做的缺点是应用的运行、配置、管理、所有生存周期将与当前操作系统
转载
2024-03-13 10:40:26
66阅读
一、搭建完全分布式hdfs集群上一张我们学习了HDFS伪分布式集群的搭建。实际上完全分布式集群的搭建也大同小异。我们前一章在同一个node1节点上分别部署配置了namenode、datanode、snn 三个角色，同理，这里讲下完全分布式环境的搭建。完全分布式环境搭建，将hdfs中的多个角色分布在不同的物理机上，而不是同一台我们多准备出2台机器，如果在多台机器的情况下，namenode所在的机器就
转载
2024-02-13 19:57:07
28阅读
一、HDFS基本概念HDFS全称是Hadoop Distributed System。HDFS是为以流的方式存取大文件而设计的。适用于几百MB，GB以及TB，并写一次读多次的场合。而对于低延时数据访问、大量小文件、同时写和任意的文件修改，则并不是十分适合。目前HDFS支持的使用接口除了Java的还有，Thrift、C、FUSE、WebDAV、HTTP等。HDFS是以block-sized chun
转载
2023-12-22 19:26:24
60阅读
# 从Kubernetes到HDFS: 构建分布式存储系统的关键
部署与踩坑
Kubernetes Dashboard 是一个管理Kubernetes集群的全功能Web界面，旨在以UI的方式完全替代命令行工具（kubectl 等）。目录部署创建用户集成Heapster访问kubectl proxyNodePortAPI ServerIngress部署Dashboar
转载
2024-06-18 21:30:06
76阅读
文章目录一、Dashboard简介二、Dashboard部署安装三、配置Dashboard登入用户1、通过Token令牌登入2、通过kubeconfig文件登入四、Dashboard创建容器五、扩展 一、Dashboard简介Kubernetes Dashboard是一个Web UI，用于管理Kubernetes集群中的应用程序和资源。它提供了一个可视化的界面，可以方便地查看和管理Kuberne
转载
2023-08-30 07:29:48
102阅读
简介安装Prometheus Operator：可以通过Helm安装Prometheus Operator，它可以自动创建和管理Prometheus实例。安装Node Exporter：Node Exporter是一个用于收集主机指标的代理程序，可以在每个节点上安装。配置ServiceMonitor：ServiceMonitor是Prometheus Operator中的一种资源类型，用于自动发现
转载
2023-08-21 20:56:45
112阅读
