Ingress基本概念通俗来讲，ingress和Service、Deployment，也是一个k8s的资源类型，ingress用于实现用域名的方式访问k8s内部应用。通过用户访问的 URL，把请求转发给不同的后端 Service。这种全局的，为了代理不同后端Service而设置的负载均衡服务，就是Kubernetes里的Ingress服务。client > 负载均衡(
转载
2024-10-14 06:24:43
58阅读
一、同机器下的集群搭建： 1，创建redis实例统一存放的文件夹——在/usr/local路径下创建cluster文件夹，命令：mkdir cluster &nb
转载
2024-06-28 20:16:20
50阅读
1.Zookeeper安装搭建Zookeeper集群并查看各服务器的角色停止Leader并查看各服务器的角色1.1 安装Zookeeper1）编辑/etc/hosts ,所有集群主机可以相互 ping 通（在nn01上面配置，同步到node1，node2，node3）nn01 hadoop]# vim /etc/hosts192.168.1.21 nn01192.168.1.22 node1192
Sails+mongoDB项目部署在阿里云服务器上一、购买服务器1. 配置安全规则： 80/80：sails接口27017/27017：mongodb接口8080/8080：tomcat接口22/22：ssh接口（ftp）用的二、下载xshell和xftp1.Xshell：远程控制服务器的centos 注意：名称随便取，主机是服务器
author：姚建松 Hadoop 集群部署文档 一、准备工作 准备工作： 现在有 3 台机器，这里以 centos6.8-64 位为例，以 minimal 方式安装 192.168.1.101 192.168.1.102 192.168.1.103 在 3 台节点上都先关闭防火墙 iptables –F chkconfig iptables off setenforce 0 vi /etc/se
1.HA架构注意事项 两个Namenode节点在某个时间只能有一个节点正常响应客户端请求，响应请求的节点状态必须是activestandby状态要能够快速无缝切换成active状态，两个NN节点必须时刻保持元数据一致将edits文件放到qjournal(一种分布式应用，依赖zookeeper实现，管理edits)，而不存储在两个NN上，如果各个edits放在各个NN上，只能通过网络通信达
转载
2024-07-26 12:46:37
54阅读
hadoop2.6 HA平台搭建一、条件准备软件条件：Ubuntu14.04 64位操作系统，Hadoop 2.6.0, zookeeper 3.4.6硬件条件：1台主节点机器，配置：cpu 8个，内存32G,硬盘200G5台从节点机器，配置均为：cpu 4个，内存16G,硬盘200G各个节点IP如下：服务器名字Ip地址备注（为方便操作将hostname改为如下）Hd-Na
转载
2024-06-12 19:38:01
80阅读
1. Redis集群的环境搭建(windows)1.1. 环境 Redis集群：如果部署到多台电脑，就跟普通的集群一样；因为Redis是单线程处理的，多核CPU也只能使用一个核，所以部署在同一台电脑上，通过运行多个Redis实例组成集群，然后能提高CPU的利用率。需要4个部件：Redis： 安
转载
2024-04-18 13:49:31
81阅读
1.什么是redis?Redis 是一个基于内存的高性能key-value数据库（有理解错误或不足欢迎指正）。2.Reids的特点Redis本质上是一个Key-Value类型的内存数据库，很像memcached，整个数据库统统加载在内存当中进行操作，定期通过异步操作把数据库数据flush到硬盘上进行保存。因为是纯内存操作，Redis的性能非常出色，每秒可以处理超过 10万次读写操作，
转载
2024-06-20 09:52:14
19阅读
**Kubernetes（K8S）需要几台机器？**
Kubernetes（K8S）是一个用于自动部署、扩展和管理容器化应用程序的开源平台。在部署Kubernetes集群时，我们需要决定集群中需要多少台机器。这个问题涉及到整个集群的负载均衡、高可用性等方面。在本篇文章中，我将教你如何确定Kubernetes集群需要几台机器。
**步骤概览：**
| 步骤 | 描述
原创
2024-03-28 11:24:43
92阅读
凡事都要讲究个为什么。在搭建集群之前，我们首先先问一句，为什么我们需要搭建集群？它有什么优势呢？1|1高可用性 Elasticsearch 作为一个搜索引擎，我们对它的基本要求就是存储海量数据并且可以在非常短的时间内查询到我们想要的信息。所以第一步我们需要保证的就是 Elasticsearch 的高可用性，什么是高可用性呢？它通常是指，通过设计减少系统不能提供服务的时间。假设系统一直能够提供服
转载
2024-07-24 19:29:06
61阅读
（一）配置环境
1.1.硬件：
三台机器：ubuntu12.04-64 server
1.2 软件：
jdk 1.6.0_45 64位
hadoop-1.0.3
1.3 分工如下：
node00:NameNode/JobTracker/SecondaryNameNode(这里最好用一台机来单独做SecondaryNameNode)
node01:DataNode/TaskTracker
node
转载
2024-07-26 12:46:50
47阅读
为什么要有集群 一主可以有多从，如果同时的访问量过大或者发生自燃灾害，主服务可能会挂掉，数据服务就会挂掉 大公司都会有很多的服务器（华东、华南、华中等等）集群概念 集群是一组相互独立的、通过高速网络互联的计算机，它们构成了一个组，并以单一系统的模式加以管理。一个客户与集群相互作用时，集群像是一个独立的服务器。集群配置是用于提高可用性和可缩放性。Redis集群 分类 软件层
转载
2023-08-05 18:10:44
67阅读
一.Linux集群部署除了VMware，你还需要下载一个镜像文件“CentOS-6.6-x86_64-bin-DVD1.iso”本文所述均在一台笔记本电脑上模拟实现集群的部署。该笔记本电脑配置如下，Windows7旗舰版64位操作系统；处理器：Intel(R) Core(TM)i5-4210H CPU @2.90GHz 2.90GHz；内存（RAM）：12.0GB的笔记本电脑上安装了四
转载
2023-11-27 22:04:29
68阅读
由于学校开了门大数据的课程，在做实验的时候踩了许多坑，所以将Hadoop安装过程以及踩坑和如何避免踩坑在这里和大家分享一下。这次Hadoop平台的搭建主要是搭建一个三台服务器的集群，采用完全分布式的方式。看本博客前需要将linux系统在虚拟机上搭建好。一、网络配置注：三台服务器都需要配置网络。（也可以采用克隆的方式，但要记得对其他两台机器的网络信息进行修改）还是建议大家每台都操作一遍，熟悉过程
转载
2024-05-21 23:33:36
69阅读
随着vivo业务迁移到k8s的增长，我们需要将k8s部署到多个数据中心。如何高效、可靠的在数据中心管理多个大规模的k8s集群是我们面临的关键挑战。
作者：vivo 互联网服务器团队-Zhang Rong一、背景随着vivo业务迁移到K8s的增长，我们需要将K8s部署到多个数据中心。如何高效、可靠的在数据中心管理多个大规模的K8s集群是我们面临的关键挑战。
说明本博文较长，但是有效，如若计划安装多节点的hadoop，请一步一步坚持下去，有问题请留言，我们可以讨论来解决问题。 本人将该4个节点的hadoop安装在了vmware上了，同时支持安装在物理机或者vmware ESXi上。节点说明ip地址hadoop01主节点192.168.10.61hadoop02从节点192.168.10.62hadoop03从节点192.168.10.63hadoop
hdfs 跟mapreduce 尽可能同节点 数据本地化，就近原则，减少耗时元数据：物品的属性Schema（描述数据的数据）用户行为：通过监控实时获取mapreduce（复习） （1）通常一个集群中，有这几个角色：master、slave、client （2）数据副本——数据高可用、容灾 （3）mapreduce——分而治之思想 （4）一个split和一个map是一对一的关系上 （5）开发java
学习k8s需要几台机器
作为一名经验丰富的开发者，我很高兴能够分享关于学习Kubernetes（K8S）所需的机器数量以及相应的步骤和代码示例。Kubernetes是一个用于自动部署、扩展和管理容器化应用程序的开源平台，学习它将对您的职业生涯带来巨大的帮助。
首先，让我们来看看学习Kubernetes所需的机器数量。通常在学习和开发阶段，您至少需要3台机器来设置一个基本的Kubernetes集
原创
2024-03-05 10:08:16
205阅读
Kubernetes（简称K8S）是一种开源容器编排平台，用于自动化部署、扩展和管理容器化应用程序。它允许我们轻松地管理多个容器化应用程序，并根据需要自动进行水平扩展。在构建K8S集群之前，我们首先需要了解K8S集群所需的机器数量。
构建一个可靠和高可用的K8S集群需要考虑一些因素，如节点（Node）的数量和类型、Master节点和Worker节点的分配以及网络和存储等。下面将通过步骤和代码示例
原创
2024-02-04 12:29:11
112阅读
