想要搭建一个能够互相通信的集群并且能够避免每次IP的动态变化对我们的集群造成不必要的影响，给我们的集群分配固定的IP是十分必要的，而且为了方便，我们选择NAT网络模式，在这种模式下，外部机器访问不了我们内部的某个虚拟机，但是我们内部的虚拟机可以访问外部的IP。前提条件： 1.你电脑的CPU开启了对虚拟化技术的支持，否则无法正常安装虚拟机，具体怎么开启，在开启计算机的时候进入bios程序，然后找到
Centos下安装Hadoop前言一、虚拟机环境准备二、安装JDK三、安装Hadoop四、Hadoop目录结构 前言前提条件：具备Linux操作系统基础，并且已安装虚拟机。版本说明： VMware Centos6.8 SecureCRT工具 jdk1.8 hadoop2.7点击获取安装包：https://pan.baidu.com/s/1qH-ffnzQDjryuV9kHXlUAA?pwd=k6
转载
2023-10-12 12:21:32
191阅读
目录下载并配置java环境下载并解压hadoop安装包配置环境变量配置5个hadoop设置文件设置ssh免密码登录开启hadoop设置外界可以访问(选看)
常见问题，以及处理办法(扩展)1、下载并配置java环境
在这里jdk建议使用1.7或者1.8，在官方的测试中1.7是全面通过测试的，而1.8被证实可行，如果是更高版本，当然也是可以的，但有可能会带来不必要的麻烦，小编就曾经使用openjdk1
转载
2023-10-21 17:49:41
97阅读
今天我们创建一个高可用的hadoop集群，其中有四个虚拟机,分别为 myvmhost，myvm01,myvm02,myvm03,其中myvmhost和myvm01存放namenode,同时这四个虚拟机都存放datanode,这样myvmhost挂掉后还有一个myvm01顶上来接管。在进行今天操作之前，要做好下面准备工作： 首先把四个虚拟机之间root用户免密登录打通，其次四个虚拟机都要有java环
转载
2023-10-09 13:39:56
93阅读
大数据开发入门：二、Centos8安装Hadoop框架并运行示例程序（伪分布式）一、新建WinSCP连接二、安装jdk三、安装Hadoop框架四、执行Hadoop示例程序 上一篇：大数据开发入门：一、VMware15.5 Pro安装Centos8及系统设置（全步骤） 一、新建WinSCP连接1.先下载WinSCP并安装 version：5.13.2 链接：https://pan.baidu.co
转载
2024-02-23 11:13:22
86阅读
【README】本文是在单机上安装hbase （仅用于学习交流）； 相关命令：启动hadop：start-all.sh (start-dfs.sh start-yarn.sh) 关闭hadoop：stop-all.sh 启动与关闭hbase： start-hbase.sh stop-
CentOS6上编译安装httpd2.4详解如何做好服务器维护?北京艾锑无限科技与你谈谈IT人员必须知道的服务器维护信息服务器维护小知识httpd与aprAPR(Apache portable Run-time libraries，Apache可移植运行库)主要为上层的应用程序提供一个可以跨越多操作系统平台使用的底层支持接口库。在早期的Apache版本中，应用程序本身必须能够处理各种具体操作系统平
一、环境准备Centos7虚拟机一台 jdk1.8 hadoop-3.1.3 附华为开源镜像站下载地址:https://mirrors.huaweicloud.com/java/jdk/二、java 环境安装使用root用户登录并创建文件夹cd /opt
mkdir app
mkdir soft将下载好的jdk和hadoop安装包上传到虚拟机的/opt/soft目录下1、创建hadoop用户和用户
转载
2023-10-12 12:21:54
113阅读
OS:[orange@localhost ~]$ cat /etc/redhat-release
CentOS Linux release 8.2.2004 (Core) Step1: 配置IP：1 or 2 or 3 为什么配置IP?因为我们如果在生产环境下，必须通过机器名精准的找到每台d
转载
2023-12-11 10:20:47
32阅读
首先说明，本文记录的是博主搭建的3节点的完全分布式hadoop集群的过程，环境是centos 7，1个nameNode，2个dataNode，如下：1、首先，创建好3个Centos7的虚拟机2、java环境的搭建，可以参考我的博客《centos7 安装jdk 1.8》3、关闭或者禁用防火墙， systemctl stop firewalld.service 关闭防火墙；sy
近日，CentOS官方宣布CentOS系列稳定版Linux系统将停止维护，取而代之的是测试版的CentOS Stream，这也意味着CentOS将会退出历史舞台。2020年12 月 8 日，CentOS 开发团队在其官博宣布，CentOS 8 将在 2021 年底结束技术支持，CentOS 7 由于用户基数与用户贡献较多，因此会按照计划维护至生命周期结束即 2024 年 6 月 30 日，接下来一
CentOS 8网络配置心得(ping不通百度，关闭网卡再打开！！！)要使用一个系统前，会网络配置是必须的，之前也用过Linux,但网络配置是师兄帮忙弄好的，我还是不会，再加上我一直学不明白网络，所以才选了人工智能方向，最近呢，又有点自己的小想法，所以Linux又用了起来，不得不说我真是一直在装软件卸软件配置环境的路上。笑哭ing。。。 本科的时候老师讲过，无奈没有听，那时候觉得，哇塞，怎么这么难
转载
2024-03-19 12:18:25
131阅读
如何为CentOS 8设置自动更新詹姆斯·基里亚（James Kiarie） | 发布时间：2019年11月12日| 上次更新时间：2019年11月12日您可以为数据和计算机做的最好的事情就是确保它们的安全。就像打开更新一样简单。但是，大多数使用CentOS 8的人都不知道该怎么做。在本文中，您将学习如何在CentOS 8 Linux机器上启用自动软件更新。
转载
2024-05-26 17:04:24
27阅读
redhat/centos 7.x默认使用的时间同步服务为ntp服务，但是从redhat/centos 8开始在官方的仓库中移除了ntp软件，换成默认的chrony进行时间同步的服务，虽然也可以通过添加第三方的源安装ntp，但是毕竟还是使用官方推荐的更好一些，使用和ntp基本上一样，个人感觉比ntp还更简单，下面简单的叙述一下配置过程. rpm -q chro
转载
2024-05-18 19:08:26
97阅读
文章目录认识桌面分辨率设置最常用的三个程序文件管理器命令行终端文本编辑器文件系统用户目录权限机制创建目录和文件Linux常用命令当前目录1.切换目录2.显示当前工作目录3.列出文件和目录目录操作1.创建目录2.删除空目录3.删除文件或目录4.复制5.移动归档压缩归档解压归档并压缩软链接用户管理切换用户添加用户修改用户密码删除用户用户和组文件的权限修改文件权限修改文件属主可执行脚本Shell脚本
转载
2024-03-27 16:43:54
613阅读
本文将使用VMware安装CentOS8系统1、下载ios文件这里推荐使用镜像进行下载,下载连接：http://mirrors.aliyun.com/centos/8/isos/x86_64/ 建议使用dvd1，大佬随意。2、虚拟机配置打开VMWare 点击添加选择经典配置继续，点击下一步选择我们下载好的镜像文件,点击下一步设置一个用户名和密码（好像这一步的设置不会被保存，后面还会让你输入一遍），
转载
2024-05-08 10:48:21
357阅读
1.添加EPEL仓库sudo yum install epel-release
sudo yum update2.安装redisyum install redis3.启动redis并设置开机自启systemctl start redis
systemctl enable redis4.查看redis是否启动ps -ef|grep redis5.修改redis 配置文件 /etc/redis.co
转载
2023-06-30 13:03:10
222阅读
使用kubeadm在Centos8上部署kubernetes1.18环境：Windows系统centos8虚拟机系统准备：查看系统版本，首先获取root权限，之后使用 cat /etc/centos-release查看配置网络，使用 vim /etc/sysconfig/network-scripts/ifcfg-enp0s3进入到配置文件，按i键进入insert模式，将配置信息修改为如下图所示。
转载
2024-04-03 15:17:50
75阅读
如果您希望以交互方式监视系统，则htop命令应该是最佳选择之一。 htop是其前身top命令的改进，它是一个交互式的进程查看器和系统监视器，它以颜色标记资源使用指标情况，并使您可以轻松地掌握系统性能。它显示有关CPU和RAM利用率，正在执行的任务，平均负载和正常运行时间的信息。另外，htop显示所有正在运行的进程的列表，并且还可以树状格式显示这些进程。htop优于top的优势包括以颜色标记输出资源
转载
2024-04-19 14:13:05
114阅读
目录一、单机搭建0. 前置准备1. 安装运行环境及工具2. 解压安装libfastcommon3. 编译安装libfastcommon4. 创建软连接5. 解压安装FastDFS_v5.086. 编译安装FastDFS7. 配置Tracker服务8. 启动Tracker服务9. 配置Storage服务10. 启动Storage服务11. 配置Client12. 测试搭建二、集群搭建0. 前置准备1
转载
2024-05-15 11:34:42
86阅读
