本文主要思路参考了的方法，但个人在配置过程中遇到过很多的问题，最终配置成功并在此总结。 本伪分布式是在vmware上建立的，centos版本为7.7，java版本是自带的openjdk1.8.0，hadoop版本为3.2.1 安装流程：
建立主机
配置主机host名和ip
建立分机
转载
2024-01-11 00:26:52
53阅读
目录(一)新建一个虚拟机(二)配置网络(三)安装vim工具(四)设置ssh免密登录(五)设置时间同步(六)修改主机名1.方法一2.方法二(七)给主机文件添加IP名称映射(八)安装JDK8(九)安装Hadoop1.打开Xftp，连接虚拟机，在/opt目录下新建两个文件夹2.将Hadoop压缩包传输到install文件夹中3.解压文件到指定目录4.更改/opt/soft/目录下hadoop的文件名5.
转载
2023-12-29 23:53:39
65阅读
最近在学习大数据，需要用到hadoop，记录一下在centos7系统下搭建的步骤，与碰到的问题对于hadoop环境的搭建与安装首先需要明白自己要做什么（初学者不要一股脑的照着网上的教程敲敲敲，事后却不知道自己在做什么），这是我总结的一些步骤：安装java，配置java环境变量解压hadoop，配置hadoop环境变量修改ssh通讯，修改为免密码登录修改Hadoop配置文件启动hadoop，访问Na
转载
2024-04-01 08:24:42
41阅读
Hadoop入门系列(三) Centos7的基本配置前言准备这些基本配置是每台虚拟机刚下完都要检查的,不仅仅是为了安装hadoop而做准备,用于其他方面也一样1.VMware Tools的安装VMware Tools的安装配置2. 共享文件夹虚拟机>设置选项下的共享文件夹,改成总是启用,并添加一个文件夹完成后就可以了,下面我们在虚拟机中找到它就在mmt当中 如果消失了就用这个命令sudo v
转载
2024-03-25 16:14:16
90阅读
centos7下hadoop环境搭建实验目的：为5台主机搭建hadoop平台，为之后hbase做准备。实验步骤：0x01硬件条件：5台centos7主机，IP地址：x.x.x.46~50。机器的名称分别为lk，node1，node2，node3，node4。 实验条件默认使用root账户，有需要切回普通用户的情况我会提到。0x02材料准备hadoop安装包 官网下载地址：http://www.
转载
2024-05-14 16:37:53
45阅读
一、 Linux环境准备准备4台服务器，通过VMware安装centos7（此文不讲VMware安装Linux） 1台(server01)用来安装namenode和resourceManager,3台(server02,server03,server04)datanode给4台服务器新增hadoop用户 使用xshell客户连接服务器，compose bar可以同时向所有会话服务器执行相同命令us
转载
2024-04-19 17:12:03
42阅读
CentOS 7.X x64 系统安装刚好手上一台新电脑，重新开始记录。从hadoop完全分布模式的搭建到大数据的学习之路，简单通俗易懂，适合无基础的新人参考。所需环境配置系统 CentOS 7.6x64软件 VMware 141、VMware 14(虚拟机)自行百度下载安装，跟普通软件一样操作安装即可2、CentOS 7.6x64 系统安装1.官网下载地址：https://www.centos.
转载
2023-10-13 08:34:13
151阅读
文章目录编译libnl编译openssl编译wpa_supplicant编译Wireless Tools安装wifi相关工具编译RTL8188eu驱动 首先确定要添加支持wifi的芯片组，我要添加的为rtl8188eu。首先想到的是，看一下海思提供的文档里有没有相关WIFI的资料。还真找到了，路径为：随安保Hi3516E V200R001C01SPC010_ReleaseDoc\zh\02.o
转载
2024-09-29 22:02:16
29阅读
前言经过上一篇文章，发现机器网卡找不到，不能上网，对于一个服务器怎么能不上网呢，于是查找了很多资料也踩了很多坑，终于解决了。下面就是解决方法：本人用的是Intel nuc 8i5bek型号的机器，是19年新出的机器，所以较老的系统是没有集成驱动的，因此需要下载去intel 官网下载linux系统对应的网卡源码，进行编译、安装，通过网上的 lspci | grep -i ethernet 命令并看不
转载
2023-10-13 06:41:08
314阅读
Hadoop 在大数据技术体系中的地位至关重要，Hadoop 是大数据技术的基础。这是一篇入门文章，以安装部署 Apache Hadoop2.7.7版本为主线.一、安装环境说明1、操作系统：这里我们使用的是centos 7，如果没有安装，自行安装。2、hadoop：Apache Hadoop2.7.73、java：这里我使用的是java8版本
百度云资源下载 提取码：xqzq二、安装java1、安
转载
2023-10-12 12:19:59
65阅读
软件版本：CentOS Linux release 7.5.1804 (Core)安装准备：1、安装jdk2、主机名不能包含下划线_3、配置hosts4、配置master主机免密登录各节点5、关闭防火墙和selinux安装过程摘要：1、解压安装包2、配置环境变量3、修改配置文件4、目录复制到所有节点5、namenode格式化6、启动hadoop7、验证1、安装jdk用yum安装，先查看有哪些可用的
转载
2024-01-05 17:22:46
88阅读
本文介绍centos7Hadoop安装配置以及一些个人发现的问题。1、Hadoop伪分布式配置 这里推荐一篇专业文章：http://dblab.xmu.edu.cn/blog/install-hadoop-in-centos/ 按照所述步骤即可完成。注意：我这里是伪分布式配置，中间的单机分布配置请忽略。jdk配置因为个人安装版本以及使用终端的不同，配置参数也会不同。如果你使用的centos选择安装
转载
2024-08-02 11:35:37
19阅读
centos7的apache服务器配置CentOS 7 是一种流行的 Linux 操作系统，而 Apache 则是最流行的 Web 服务器软件之一。在这篇文章中，我们将学习如何在 CentOS 7 上安装和配置 Apache Web 服务器。一、安装 Apache要在 CentOS 7 上安装 Apache，您可以使用 yum 软件包管理器。通过执行以下命令，即可安装 Apache web 服务器
转载
2023-12-06 22:13:47
66阅读
1 问题VMWare下centos7，通过官网下载hadoop的linux版本并解压配置环境后运行hadoop version显示bash：hadoop:未找到命令，在
原创
2022-10-08 09:09:13
92阅读
1、设置静态ip网络/etc/sysconfigs/network-scripts/ifcfg-ens33，修改/etc/hosts，/etc/hostname，修改客户机win10的hosts文件（C:\Windows\System32\drivers\etc） 2、关闭防火墙 #查看防火墙状态 ...
转载
2021-09-11 20:28:00
493阅读
2评论
前言本文为作者的日记，因此默认读者会使用linux系统的基本命令如编辑及保存文件、打开文件夹、退出文件夹、新建及删除文件夹、显示文件内容等。工具VMware 12 pro（虚拟机软件） CentOS 7 Hadoop-3.0.0 jdk1.8.0 SecureCRT（用于登陆linux主机）安装及配置CentOS在VMware中点击文件-新建虚拟机，然后按提示进行即可，虚拟机设置大概如下图
转载
2023-10-14 16:46:04
114阅读
目录一、安装搭建java环境1、安装方法2、查看是否已安装3、卸载4、安装4.1 检查 yum 中有没有 java1.8 包4.2 开始安装5、验证二、 Hadoop安装1、下载2、准备启动 Hadoop 集群2.1配置Hadoop守护进程的环境2.2配置系统环境变量2.3 配置etc/hadoop/core-site.xml文件2.4配置etc/hadoop/hdfs-site.xml文件2.
转载
2023-12-27 06:55:44
531阅读
准备工作：本人是在阿里云上开了3个centos7，模拟集群状态。所有操作都是在root用户，用其他账号可能会带来问题，建议先在root用户操作，搭建完成没问题了可以用其他账户试试。一、安装jdkhadoop3最低需要jdk8，所以需要先在每个节点上安装jdk8，这里不再多说，只要保证最后java -version能运行出来就行，3台机子都要装好。二、配置机器名称我的机子：10.0.2.4是node
转载
2023-10-08 22:00:55
117阅读
一：测试环境搭建规划：主机名称IP用户HDFSYARNhadoop11192.168.1.101hadoopNameNode,DataNodeNodeManagerhadoop12192.168.1.102hadoopDataNodeNodeManagerhadoop13 192.168.1.103hadoopDataNode,SecondaryNameNodeNodeManagerhadoop1
转载
2024-08-26 16:57:14
76阅读
具体安装步骤详解一 ：centos7安装界面你有 60 秒的时间可以选择不同的操作模式，从上而下分别是： 1. ( install centos 7 )正常安装 CentOS 7 的流程； 2. ( test this media & install centos 7 )测试此光盘后再进入 CentOS 7 的流程； 3. ( troubleshooting )进入除错模式！选择
转载
2024-01-23 17:22:31
62阅读
