项目测试需要，服务器有限只能安装单机版的hdfs,hive,hbase,spark设置hostname hostnamectl set-hostname "xxx" 首先做免秘钥登录，后面安装会有很多要输入密码的操作，手动输入太麻烦方法1. ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsa 简单解释
文章目录目录系列文章目录文章目录前言一、前期准备二、Hadoop介绍2.1、Apache Hadoop2.2、Cloudera Hadoop2.3、Hortonworks Hadoop2.4、Hadoop1与Hadoop2的区别2.5、大数据技术生态体系三、虚拟机环境准备1. 克隆虚拟机 &n
转载
2024-04-25 15:19:17
200阅读
我这里有20G未分区的空间，如果已经被其他分区占用，请删除其他分区，新手建议自动配置分区，这样既方便有不容易出问题。【选择自动分区选择-点击左上角的完成】 下面说一下手动分区选择手动分区 然后单击左上角”完成”就会弹出手动分区的配置界面 创建一个手动分区，以下是我虚拟机的手动分区方案 如果你是新手记住：除了SWAP分区外，其他分区的文件系统一律
转载
2023-10-02 09:17:57
94阅读
操作系统版本：
centos7 64位hadoop版本：
hadoop-2.7.3hbase版本：
hbase-1.2.4机器：
192.168.11.131 master1 Namenode ResourceManager QuorumPeerMain Jobhistory HMaster DFSZKFailoverControll
转载
2024-08-28 21:24:59
32阅读
Linux CentOS7安装Hadoop2.7集群总体思路，准备主从服务器，配置主服务器可以无密码SSH登录从服务器，解压安装JDK，解压安装Hadoop，配置hdfs、mapreduce等主从关系。 1、环境，3台CentOS7，64位，Hadoop2.7需要64位Linux，CentOS7 Minimal的ISO文件只有600M，操作系统十几分钟就可以安装完成， Master 192.168
转载
2024-10-12 14:23:52
26阅读
# CentOS 7 上安装 HDFS、Hive 和 Spark 的详细指南
在大数据处理领域，Hadoop 生态系统是一个不可或缺的组成部分。本篇文章将指导你在 CentOS 7 操作系统上安装 HDFS、Hive 和 Spark，并介绍如何配置它们以实现高效的分布式数据处理。
## 环境准备
在开始安装之前，确保你的 CentOS 7 系统已经安装了 Java（版本 8 或更高）。可以通
1、文件准备下载hadoop安装包链接: hadoop-3.3.42、安装Hadoop上传文件到服务器解压到指定安装路径（这里是/export/server）tar -zxvf hadoop-3.3.4.tar.gz -C /export/server/ 进入安装路径，创建软连接cd /export/server
ln -s /export/server/hadoop-3.3.4 hadooph
下面我们来进行hadoop集群的安装与部署注：文章中的qipao请修改为自己的主机名或者ip地址1.1首先我们去官网下载hadoop下载好了，就是它1.2上传hadoop 下面我们用winSCP或者mobaxterm把hadoop传输到一台虚拟机上的/usr/local/目录下，用软件连接后，选到/usr/local/目录拖进去就可以了 ok，拖进来了1.3解压hadoop并配置环境变量 下面我
转载
2024-10-08 21:30:10
181阅读
swoole的优点就不说了，安装对于没接触过的还是优点麻烦，写个教程看看能不能帮上需要的同学们！centos7的安装就不说了 网上很多，一般都是虚拟机里面安装的 ，我是在mac虚拟机里面装的 （我装的时候分区就没有按照教程分区，系统自动分区的（20G）因为按照教程分区 有错误安装不了）温馨提示里面有桌面的程序看自己需不需要 ，自己选择！ 安装好centos7后 咱们就开始装swoole，
转载
2024-03-19 06:41:58
154阅读
一、安装环境操作系统：CentOS7.2.1511hadoop版本：2.7.3节点信息：角色地址Namenode192.168.1.182Datanode192.138.1.186Datanode192.168.1.122二、安装jdk安装jdk8，注意：hadoop2.x，必须是jdk8curl -LO -H "Cookie: oraclelic
原创
2019-02-18 18:32:44
2216阅读
点赞
2017-07-05：修正几处拼写错误，之前没发现，抱歉！第一次在cnblogs上发表文章，效果肯定不会好，希望各位多包涵。编写这个文档的背景是月中的时候，部门老大希望我们能够抽时间学习一下Hadoop大数据方面的技术；给我的学习内容是通过Ambari安装Hadoop集群。通过一周左右的学习和实践，整理出现在这篇安装心得。第一篇，重点放在Ambari-Server的搭建安装上。安装默认使用Root
转载
2024-03-05 11:10:25
73阅读
目的：安装hadoop Hadoop是需要在java环境下面运行，所以，首先要保证你的系统下面装有JDK。那么步骤是：配置SSH——安装JDK——安装hadoop（当然你愿意先安装它也完全没问题）——配置java的环境变量（需要知道java的安装路径）——配置namenode下面3个配置文件——格式化hadoop——启动hadoop。 我们用一般用户登录，然后切换到root下面，因为权限的问题，这
转载
2024-08-16 09:43:51
58阅读
一般自己想搞东西，没有服务器，就只能搭虚拟机了...所以把配置过程记录下来
一.安装虚拟机和CentOS7系统。 这个很简单，网上很多，就不多说了。
二.配置linux系统的ip，是其能够上网，并且可以本机SSH链接。 1.本机打开cmd，输入ipcon
转载
2024-07-18 23:48:19
114阅读
首先我们要准备VM虚拟机，centos7.4版本，私信我我的百度云盘链接里有，还有额为的惊喜。一.磁盘配额的作用当 Linux 根分区的磁盘空间耗尽时，Linux 操作系统将无法再建立新的文件（包括程序运行的临时文件），从而出现服务程序崩溃、系统无法启动等故障。为了避免在服务器中出现类似磁盘空间不足的问题，可以启用磁盘配额功能，对用户在指定文件系统（分区）中使用的磁盘空间、文件数量进行限制，以防止
转载
2024-04-09 14:02:16
74阅读
我用ultraiso把centos7的iso镜像写进U盘，然后从U盘启动电脑进入安装界面，如下： 界面说明：Install CentOS 7 ： 安装CentOS 7 Test this media & install CentOS 7 ： 测试安装文件并安装CentOS 7 Tro
转载
2023-11-25 18:56:45
147阅读
自从Redhat发布RHEL7以来，已经有块三年的时间了。今晚刚好有空，那么我就拿出来分享一下相较于6而言，其中的变化吧。一、文件系统。** 在6的版本中，采用的文件系统默认为EXT4的文件系统个，该文件系统可以支持文件系统容量的最大值为1EB，单个文件系统能够达到16TB，这对于大型的磁盘阵列用户来说是非常欣喜的。同时EXT4的在线碎片管理非常优秀，可以在线对碎片进行整理，并提供e4defra
转载
2024-03-26 08:50:01
131阅读
操作系统：centos7.1 （在ubuntu上测试过，不支持 screen）主机：虚拟云主机问题出现：在使用打包式在线安装phpstudy时，由于安装过程非常漫长，http报文过一段时间没有回送，ssh连接就会断开。解决办法：使用screen进行会话管理，在连接断开后，再次登录终端，使安装过程继续下去。1.安装screenyum install screen2.创建会话并进入screen模式，进
转载
2024-02-20 11:36:37
79阅读
具体的安装步骤网上有很多人说明在此我不在多说，只是把他们的方法拿过来，本文具体说一说我在安装oracle 遇到的问题。需要特别注意的地方，我会标红，字体放大。 系统版本 Cnet OS 64 位Oracle版本 ：11g 64 位 要说明一下：如果系统位数和Oracle位数不一样在安装的时候会出现问题，所以在安装之前要确定，系统和Oracle版本相对应，以免出现不必要的问题。&
转载
2024-05-22 21:48:40
182阅读
在centos7上设置swap交换空间 新建swap文件第一步：确保系统中有足够的空间来用做swap交换空间，我使用的是KVM,准备在一个独立的文件系统中一个swap交换文件，在/opt/image中2G的swap交换文件 设置swap大小第二步：交换文件并设置其大小为2G，使用如下命令
[root@sense image]# dd if=/dev/zero o
转载
2024-04-27 19:07:31
74阅读
文章目录NFS是什么服务端配置安装NFS建立共享目录并设置权限配置文件启动NFS服务设置防火墙查看是否共享成功客户端配置安装NFS查询NFS服务器的远程共享信息建立共享目录挂载服务器目录一劳永逸总结 NFS是什么最近项目上有这么个需求，客户端上传文件的时候，想把文件上传到另外一台服务器。本来想用ftp的，觉得太麻烦，就各种查资料，请教别人，后来发现，NFS这个东东真不错。NFS（网络文件系统）服
转载
2024-08-08 13:45:47
205阅读
