一、环境准备首先将服务器内部防火墙关闭,并关机开机启动,并关闭selinux,此处不在赘述。1.1安装wget和vim软件(个人习惯使用vim编辑文件)1yuminstall-ywgetvim1.2安装git1yuminstall-ygit安装结束后安全起见,确认是否满足官方要求的Git>=1.7.51gitversion图片.png1.3安装go语言环境(因为yum源中没有go的安装包,故
原创 2018-01-12 13:57:34
707阅读
系统环境:CentOS 7JDK版本:jdk-8u191-linux-x64MYSQL版本:5.7.26Hadoop版本:2.9.0Hive版本:2.3.4 Host NameIpUser/PassNamenode192.168.2.3root/root.Datanode1192.168.2.5root/root.Datanode2192.168.2.6root/root. &
安装Hadoop环境1)下载Hadoop安装包 访问http://hadoop.apache.org/releases.html官网,可以看到官网提供了很多版本提供下载。 为了方便,使用了个人云链接,可以使用wget安装$ wget https://pan.baidu.com/s/1yyFCpLUSpgWW97ZnE8VJGQ如果没有安装wget,可以通过$ yum -y install wget
网络上关于如何单击模式安装Hadoop的文章很多,按照其步骤走下来多数都失败,按照其操作弯路走过了不少但终究还是把问题都解决了,所以顺便自己详细记录下完整的安装过程。 此篇主要介绍如何在Windows环境下设置虚拟机环境以及一些准备工作,熟悉WMware的朋友可以略过。 网络上关于如何单机模式安装Hadoop的文章很多,按照其步骤走下来多数都失败,按照其
1. 前期准备1)规划主机IP角色172.16.10.67172.16.10.67NameNode、SecondaryNameNode、ResourceManager、DataNode、NodeManager172.16.10.68172.16.10.68DataNode、NodeManager172.16.10.68172.16.10.69DataNode、NodeManager2、环境搭建一
[日期:2015-12-02]  作者:kylinlin[字体:大 中 小] 目录开始之前系统环境监控内容所需软件包 CentOS7重要变化配置开发环境同步时间关闭Selinux使用CRT上传软件包安装邮件服务监控主机安装常用到的命令安装nagios所需要的运行环境增加用户安装nagios配置权限安装插件安装nrpe远程主机安装常用到的命令配置运行环境安装n
转载 3月前
396阅读
记录了我第一次成功部署node.js 和mongodb到linux服务器上了,期间也遇到一些小坑,但是网上各位大佬记录的文章帮了大忙,所以我也将过程记录了下来。安装Node使用nvmlinux上安装node,肯定首选nvm,因为这样可以控制node的版本。安装git:sudo apt install git # 安装完后运行一下验证是否安装成功 git --versionpull nvm的代码的
下载http://rocketmq.apache.org/release_notes/release-notes-4.3.0/配置:(*注意:rocketmq存放路径最好别有空格,否则配置容易出错) 配置环境变量:ROCKETMQ_HOME 变量值:MQ解压路径\MQ文件夹名(这个路径不能有空格,否则会报错)在path下面配置启动NAMESERVER.cmd进入到安装目录的bin目录下,执行sta
转载 2024-10-08 13:51:33
19阅读
需要工具:VMware, jdk, centOS7, hadoop,Mobaxterm (或其他终端如Xshell)Ⅰ.准备工作:虚拟机安装CentOS操作系统(Linux)  官网链接: The CentOS Project VMware虚拟机 自行下载CentOS安装建议选用以下安装方式: 图形化界面更直观  后续方便VMtools等工具使用
1、环境centos7https://github.com/alibaba/nacos/releases2、解压tarxzvfnacos-server-2.0.0.tar.gz3、java环境安装java1.8+4、配置nacoscd/root/nacos/confnacos-mysql.sql//nacos初始化的sql语句application.properties//连接配置文件vimapp
原创 2021-04-28 17:49:05
1337阅读
cobbler介绍Cobbler是一个Linux服务器快速网络安装的服务,由python开发,小巧轻便(15k行python代码),可以通过PXE的方式来快速安装、重装物理服务器和虚拟机,同时还可以管理DHCP,DNS,TFTP、RSYNC以及yum仓库、构造系统ISO镜像。Cobbler可以使用命令行方式管理,也提供了基于Web的界面管理工具(cobbler-web),还提供了API接口,可以方
转载 2024-10-18 19:14:31
231阅读
# CentOS 7 部署 Hadoop 完整指南 在数据处理和分析的领域,Apache Hadoop 是一个非常重要的工具,它用于处理大数据。在本文中,我将指导你如何在 CentOS 7部署 Hadoop。我们将采用一个分步流程,确保每个阶段都清晰易懂。 ## 部署流程 下面是部署 Hadoop 的基本步骤: | 步骤 | 描述
原创 2024-09-05 04:37:22
33阅读
一、hadoop下载,使用2.6.5版本http://hadoop.apache.org/releases.htmltar -zxvf hadoop-2.6.5.tar.gz笔者的路径是/root/Downloads/hadoop-2.6.5二、Hadoop的配置1、修改文件/root/Downloads/hadoop-2.6.5/etc/hadoop/hadoop-env.shexport JA
转载 2023-08-29 22:17:54
90阅读
# CentOS 7 单机部署 Redis 集群 Redis 是一个高级键值存储系统,常用于构建高性能的应用程序。在许多情况下,尤其是在需要高可用性和扩展性时,Redis 集群显得尤为重要。今天,我们将学习如何在 CentOS 7单机部署 Redis 集群。 ## 1. 流程概述 在开始之前,让我们先看一下整个流程的步骤。 | 步骤 | 描述
原创 2024-10-30 03:44:49
78阅读
环境说明:系统:Centos7 在VM中安装的hadoop版本:2.7.7JDK:1.8注意:Hadoop需要Java环境的。记得安装Java环境PS:Centos JDK安装  mkdir /data 1:上传jdk的tar.解压2:修改/etc/proflie,把Javahome环境变量配置上:记住:在修改前,先备份在文件最后添加: export JAVA_HOME=/da
转载 2024-01-04 09:22:57
90阅读
    最近想学大数据的东西,那首先就要部署一个Hadoop环境,看了看官网,现在已经3.3.x、3.2.x、3.1.x、2.x.x版本,虽然最近都有更新,但就着不是最新的也不是最旧的原则,选择了3.2.2版本。网上也有很多部署教程,参考多份教程、文档,部署过程中总会多少有些问题,这里记录一下自己的部署过程,保证按照步骤肯定能够使用最基本的Hdfs和Mapreduce功能,至于
转载 2023-12-03 07:41:56
406阅读
# 在 CentOS 7 上安装单机Hadoop 指南 ## 简介 Hadoop 是一个开源的分布式计算框架,广泛应用于大数据处理。虽然它主要用于集群环境,但在单机模式下进行学习和测试也非常重要。本文将为初学者详细介绍如何在 CentOS 7 上安装单机Hadoop。我们将按照一系列步骤操作,并提供代码示例及说明。 ## 安装步骤流程 以下是安装 Hadoop 的主要步骤,以及每个
原创 8月前
79阅读
1. 创建hadoop用户为每台机子创建一个hadoop用户,并且用户名和密码一致[root@localhost ho]# useradd hadoop [root@localhost ho]# echo "hadoop"|passwd --stdin hadoop # echo "yourpassword"|passwd --stdin username2. 修改network文件来配置hos
转载 2024-01-29 00:46:22
93阅读
本文旨在提供最基本的,可以用于在生产环境进行Hadoop、HDFS分布式环境的搭建,对自己是个总结和整理,也能方便新人学习使用。一、基础环境 在Linux上安装Hadoop之前,需要先安装两个程序:1.1 安装说明1. JDK 1.6或更高版本(本文所提到的安装的是jdk1.8);2. SSH(安全外壳协议),推荐安装OpenSSH。 下面简述一下安装这两个程序的原因:1. H
转载 2023-09-15 16:32:43
64阅读
CentOS-7下搭建Hadoop环境前言安装包版本ssh免密登录环境搭建1.修改网络配置信息2.关闭防火墙3.时间同步4.设置主机名5.hosts设置6.ssh配置JAVA安装Hadoop配置文件1. 解压Hadoop2. 配置env文件3. 配置核心组件文件4. 配置文件系统5. 配置yarn-site.xml6. 配置 MapReduce 计算框架文件7. 配置 Master 和 slav
转载 2024-07-01 12:55:08
101阅读
  • 1
  • 2
  • 3
  • 4
  • 5