ha的原理 hadoop的ha high avalible 高可用集群 hadoop的搭建方式5种 单机 伪分布式 完全分布式 高可用 联邦+高可用 高可用的模式： 为了解决完全分布式的主节点的单点故障的问题 解决方案：在这个集群中 同一时间有2个主节点 但是只有一个 是对外提供服务的 另外一个实时处于热备状态 我们将对外提供服务的称为active的 热备的称为standby 以namenode为
转载
2023-09-22 12:57:49
58阅读
Kubernetes（简称K8S）是一个用于自动化部署、扩展和管理容器化应用程序的开源平台。在实际工作中，我们通常需要搭建一个Kubernetes集群来部署和管理我们的应用程序。为了简化这个过程，我们可以使用一些K8S集群搭建工具来帮助我们快速部署Kubernetes集群。
在本文中，我将介绍如何使用一种常用的K8S集群搭建工具来搭建Kubernetes集群，帮助那些刚入行的小白快速了解这个过程
原创
2024-02-22 09:51:41
68阅读
RESTful架构1：什么是互联网软件在传统开发中，软件开发主要是单片机开发，而网络开发主要是系统之间的通信，软件开发和网络开发之间交集较少，但是互联网的兴起，使的软件开发和网络开发开始开始融合，因此，网站的开发也可以采用软件开发的模式，即“互联网软件”，采用客户端/服务端的模式，建立在分布式系统上，通过互联网通信，具有高并发，高延时的特征。RESTful就是一种互联网软件架构。2：什么是REST
生而有涯而学无涯最近使用VMWare搭建了一个虚拟的Hadoop集群环境，搭建的过程中参考了很多网上大神的资料，在这里记录下本人实践的全过程，用于以后的查询参考使用，参考的资料会在文末贴出对应的链接。集群配置详情hostnameip addressos(Centos7mini)master192.168.224.100Centos7(mini)slave1192.168.224.201Centos
转载
2023-07-12 15:42:12
183阅读
使用腾讯云主机，docker构建集群测试环境。环境1、操作系统： CentOS 7.2 64位网路设置hostnameIPcluster-master172.18.0.2cluster-slave1172.18.0.3cluster-slave2172.18.0.4cluster-slave3172.18.0.5Docker 安装curl -sSL https://get.daocloud.io/
转载
2023-10-13 16:09:50
123阅读
一、虚拟机的安装（Centos 7)1.点击 Centos 7镜像 进行下载 2.安装成功后，利用克隆再克隆两个作为slave1和slave2进行搭建 3. 利用 ifconfig命令，获取三个虚拟机的IP地址：二、搭建集群配置主节点名（master) 在命令行中输入： vi /etc/sysconfig/network 添加一下内容：NETWORKING=yes
HOSTNAME=master配
转载
2023-09-21 22:48:33
166阅读
在这篇博文中，我将与大家分享如何搭建“iOS SSH搭建工具”。在我们的技术今天，SSH（安全外壳协议）为远程管理iOS设备提供了极大的便利。以下是详细的步骤和配置指南，以帮助您轻松完成这个过程。
## 环境准备
在搭建iOS SSH工具之前，首先需要确保满足软硬件要求。以下是我们需要的硬件和软件配置。
软硬件要求：
- **硬件**：
- 一台运行macOS的计算机
- 一台连接
K8S集群搭建工具有哪些？
Kubernetes（简称K8S）是一个用于自动部署、扩展和管理容器化应用程序的开源平台。K8S集群是由多个运行K8S软件的机器组成的，可以实现高可用、可扩展和可管理的容器化应用部署。为了方便快速搭建K8S集群，社区开发了一些K8S集群搭建工具。
本文将介绍几种常用的K8S集群搭建工具，并通过代码示例演示搭建过程的关键步骤。
K8S集群搭建工具：
1. kubea
原创
2024-01-15 14:01:40
315阅读
搭建所用Hadoop java版本hadoop-3.1.3.tar.gz jdk-8u212-linux-x64.tar.gz安装包链接：Hadoop及jdk安装包提取码：icn6首先，我们先下载并且安装好虚拟机准备好三台机器主机名ip地址master192.168.45.110salve1192.168.45.111salve2192.168.45.112 集群按以下要求
转载
2023-09-14 13:59:28
81阅读
一、集群安装条件前置在虚拟机上先准备一个机子 按用前面【安装单机hadoop】 已完成安装jdk,hadoop和ssh、网络等配置环境等。虚拟机和操作系统环境：ubuntu14 + hadoop2.6+jdk1.7+ssh虚拟机：（vmware10） 二、集群安装环境设置Hadoop的安装为分布式模式，考虑到实际条件集群机定为3台（2台也可以）。（1）克隆3个ubuntu实例
转载
2023-08-04 11:24:16
196阅读
概念HDFS分布式文件系统会将用户提交的文件存储在一个服务器集群中 HDFS中有两种重要的服务器软件角色：datanode --》负责存储用户文件的块namenode--》负责记录用户存储的文件的虚拟路径，及文件每一个块的具体位置（哪一块在哪一台datanode服务器上） 安装一个HDFS集群 准备工作：规划：要有一台机器安装namenode &
kubeadm是官方社区推出的一个用于快速部署kubernetes集群的工具。这个工具能通过两条指令完成一个kubernetes集群的部署：# 创建一个 Master 节点
$ kubeadm init
# 将一个 Node 节点加入到当前集群中
$ kubeadm join <Master节点的IP和端口 >1. 安装要求在开始之前，部署Kubernetes集群机器需要满足以下几个
转载
2024-06-17 20:17:42
150阅读
CentOS6.5mini版hadoop集群搭建流程 CentOS 7 系列： 关闭防火墙：systemctl stop firewalld 禁止防火墙开
完全分布式环境是指在多台单机上组建分布式集群，Hadoop完全分布式集群是主从架构，一般需要使用多台服务器组建。从安全性等方面考虑，Hadoop集群搭建在Linux系统上其安全性更有保障。以下是创建Linux虚拟机的步骤打开软件，在上安装CentOS 7 的Linux操作系统。1.打开安装好的软件，进入主界面，选择“创建新的虚拟机” 2.弹出“新
转载
2023-09-06 09:25:32
18阅读
纸上得来终觉浅，我们现在就要在 Windows 系统上实际操作，用几个应用软件搭建出一个“最小化”的 HTTP 实验环境，为后续学习搭建好环境。一、搭建此环境要用到的工具如下：Win10系统WiresharkChrome/FirefoxTelnetOpenRestyWireshark是著名的网络抓包工具，能够截获在 TCP/IP 协议栈中传输的所有流量，并按协议类型、地址、端口等任意过滤，功能非常
转载
2024-02-03 17:35:16
76阅读
首先说一下配置环境：三台电脑192.168.30.149 hadoop149 namenode和jobtracker ###因为149机器稍微好一点
192.168.30.150 hadoop150 datanode和TaskTracker
192.168.30.148 hadoop150 datanode和TaskTracker配置ssh无需密码登陆：$ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa
$ cat~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys我的master在149可以吧149
转载
2011-12-05 14:31:00
3083阅读
2评论
一. redis的应用场景（1）缓存 （2）队列 （3）数据存储二. 安装环境（1）服务器环境：Linux/windows （2）redis版本,下载源码。（3）预装软件（gcc ,tcl ）gcc 为C语言编译器，Redis是C语言写的。 tcl是一门语言，Redis自测组件是tcl编写的。centos中可以用yum安装。（4）make 安装需要gcc &n
转载
2023-09-22 17:30:36
43阅读
要将原有的系统改造为SOA框架，调研了几个，感觉dubbo好像还不错，就它了，虽然是在传统的IT企业，但还是要有一颗向往互联网的心网上看了一些教程都是从maven讲起的，但貌似没有好大必要先弄maven(破公司没有网络)一、搭建过程如下：1 网上搜索dubbo，进入官网下载dubbo的jar包2 下载一个dubbo-admin.war包3 下载一个zookeeper包4 &nb
转载
2024-03-20 19:31:15
45阅读
一、 Hadoop的分布式模型Hadoop通常有三种运行模式：本地(独立)模式、伪分布式(Pseudo-distributed)模式和完全分布式(Fully distributed)模式。安装完成后，Hadoop的默认配置即为本地模式，此时Hadoop使用本地文件系统而非分布式文件系统，而且其也不会启动任何Hadoop守护进程，Map和Reduce任务都作为同一进程的不同部分来执行。因此
转载
2023-08-04 20:54:59
495阅读
一、目的本文描述了如何安装、配置和管理有实际意义的Hadoop集群，其规模可从几个节点的小集群到几千个节点的超大集群。如果你希望在单机上安装Hadoop玩玩，从这里能找到相关细节。二、先决条件确保在你集群中的每个节点上都安装了所有必需软件。获取Hadoop软件包。三、安装安装Hadoop集群通常要将安装软件解压到集群内的所有机器上。通常，集群里的一台机器被指定为 NameNode，另一台不同的机器
原创
精选
2014-09-29 19:42:02
1142阅读
点赞
1评论
