说明：该文章以4台centos系统为案例配置hadoop基础集群，节点名字分别为hadoop02,hadoop03,hadoop04,hadoop051.基础集群环境准备1.1修改主机名在root用户下：vi /etc/sysconfig/network或者如何配置了hadoop账户的sudo权限，则在hadoop登陆情况下使用命令 sudo vi/etc/sysconfig/network修改
# Hive 安装与使用指南
Hive 是一个基于 Hadoop 的数据仓库工具，可以用于数据的查询和分析。虽然 Hive 通常与 Hadoop 集群一起使用，但实际上我们可以将 Hive 安装在 Hadoop 集群以外的环境中。这种灵活性使得 Hive 可以处理各种大数据环境。本篇文章将介绍如何在非 Hadoop 环境中安装 Hive，并包含示例代码及相关图示。
## Hive 的非 Had
原创
2024-08-29 04:54:51
183阅读
安装和配置Hadoop 集群1 网络拓扑通常来说，一个Hadoop 的集群体系结构由两层网络拓扑组成，如图2-1 所示。结合实际的应用来看，每个机架中会有30 ～ 40 台机器，这些机器共享一个1GB 带宽的网络交换机。在所有的机架之上还有一个核心交换机或路由器，通常来说其网络交换能力为1GB 或更高。可以很明显地看出，同一个机架中机器节点之间的带宽资源肯定要比不同机架中机器节点间丰富。这也是Ha
转载
2023-08-15 22:27:19
57阅读
官方网站：http://www.zabbix.com/ The Enterprise-class Monitoring Solution for Everyone 企业级监控解决方案 zabbix 是一个基于 WEB 界面的提供分布式系统监视以及网络监视功能的企业级的开源解决方案 zabbix 能监视各种网络参数，保证服务器系统的安全运营；并提供灵活的通知机制以让系统管理员快速定位解决存在的各种
目录Hadoop的安装与运行1. 笔者所用环境2. 从安装到运行2.1 设置SSH登录权限2.2 安装JAVA环境2.3 安装hadoop2.4 进行伪分布式配置2.5 启动伪分布式hadoop2.6 处理WARN2.7 运行Hadoop伪分布式实例Hadoop的安装与运行 Hadoop的安装大致分为5步：创建hadoop用户（Mac系统就用自己的用户吧，这一步就省略了，免得引起不必要
转载
2023-07-14 16:13:47
327阅读
1.下载好相应的win下的zabbix客户端包 2.解压到某个目录(目录任意，我一般都放在c盘根目录) 3.cmd下进入到zabbix的bin下的win64目录(我的目录是：C:\zabbix_agents_3.0.4.win\bin\win64,如果你安装32位的就进入到win32目录) 4.执行命令：zabbix_agentd -h 5.首先我们要添加到服务，然后再启动(添加到服务方便
转载
2024-03-10 19:57:38
12阅读
## 监控Hadoop集群的流程
监控Hadoop集群是保证集群稳定运行的重要环节之一。通过使用Zabbix监控工具，我们可以实时监控集群的各种指标，并及时发现并解决潜在问题。下面是监控Hadoop集群的基本流程：
| 步骤 | 操作 |
| ---- | ---- |
| 步骤一 | 安装Zabbix Server |
| 步骤二 | 配置Zabbix Server |
| 步骤三 | 安装
原创
2023-08-27 12:15:20
351阅读
花了好长时间终于把集群搭建起来了，写出来给大家分享下，让大家少走点弯路。首先我们来看看成功后的效果，三个结点成功运行wordcount这个程序结果，运行出结果 计算出来的结果图 3.实验准备 虚拟机里3台拥有CentOS6.4操作系统的计算机 hadoop-2.5.2.tar.gz安装包 jdk-8u111-linux-x64.tar.gz安装包 三台电脑要有相同的安装目录，放置had
转载
2024-01-08 18:07:48
68阅读
# Hadoop在Linux下的安装与使用
> 作者：[你的名字]
Hadoop是一个开源的分布式计算框架，用于处理大规模数据集的分布式存储和处理。由于其高效可靠的特性，Hadoop被广泛应用于大数据领域。然而，Hadoop只能安装在Linux操作系统上。本文将介绍如何在Linux上安装和配置Hadoop，并给出一些简单的示例代码。
## Linux
原创
2023-08-17 08:20:41
119阅读
文章目录一、安装准备工作二、安装1、修改主机名和hosts2.关闭防火墙3、安装包解压4.配置环境变量5、修改Hadoop配置6、同步slave1节点和slave2节点三、启动准备四、启动访问 一、安装准备工作1、虚拟机准备（centos7）master : 192.168.220.134
slave1 : 192.168.220.135
slave2 : 192.168.220.1362、安装
转载
2023-08-10 11:54:50
83阅读
本环境使用Ubuntu-18.04.1 64，分布式集群方式（三台虚拟机：一台namenode,俩台datanode）OpenJDK Java 1.8.0Hadoop 2.9.12018.9.30. 本随笔完结 创建hadoop用户（三台都要）为了操作方便，如果安装Ubuntu的时候不是“hadoop”用户，则需要增加一个名为hadoop的用户。打开终端是 ctrl+alt+t
转载
2024-03-11 09:34:45
79阅读
初始化[root@localhost ~]# systemctl stop firewalld.service
[root@localhost ~]# setenforce 0
[root@localhost ~]# vim /etc/sysconfig/network-scripts/ifcfg-ens33
[root@localhost ~]# ip a
2: ens33: <BR
目录第1章 Zabbix入门1.1 Zabbix概述1.2 Zabbix 基础架构第2章 Zabbix部署2.1 集群规划2.2 准备工作2.3 配置Zabbix yum源（3台节点）2.4 安装Zabbix2.5 配置Zabbix第4章 Zabbix使用4.1 Zabbix术语4.2 Zabbix实战 第1章 Zabbix入门1.1 Zabbix概述Zabbix是一款能够监控各种网络参数以及服
转载
2023-07-12 15:21:32
224阅读
一、简介
zabbix是一个基于WEB界面的提供分布式系统监视以及网络监视功能的企业级的开源解决方案。
zabbix能监视各种服务器和网络参数，保证服务器系统的安全运营；
并提供灵活的通知机制以让系统管理员快速定位/解决存在的各种问题。
zabbix由2部分构成:
zabbix server
可选组件zabbix agent。
zabbix serve
转载
2023-09-01 15:12:46
133阅读
Java8中最大的两个亮点，一个是Lambda表达式，另一个就是Stream。新特性的加入，一定是为了某种需求，那么Stream是什么，它能帮助我们做什么？首先看下面这个例子：有这样一份数据，一组考卷List，每个Paper有三个属性分别是学生名字studentName、课程名称className和分数score。现在我们需要从中找出语文不及格（分数低于60）的学生名字，并且按分数从高到低排序。在
Hadoop介绍： Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进行高速运算和存储。安装三台虚拟设备 在里面我建议大家选择性能稳定的合适的linux版本进行安装，一般要进行初级学习的话，暂时三台虚拟机就够学习使用了。网络ip设置 首先，选择虚拟机为net模式，看准当前网关和虚拟机能分配的网段。
转载
2023-08-21 10:35:01
80阅读
本教程是在 Centos6 下使用yum来安装 CDH5 版本的 hadoop 的教程。 如果没有添加yum源的请参考上一个教程：Hadoop架构图 NameNode、DataNode和ClientNameNode可以看作是分布式文件系统中的管理者，主要负责管理文件系统的命名空间、集群配置信息和存储块的复制等。NameNode会将文件系统的Meta-data存储在内存中，这些信息主要包括了文
Zabbix详细安装部署（最全）Zabbix详细安装部署环境准备安装依赖组件创建用户导入数据库编辑zabbix_server的配置文件安装nginxzabbix_web需要php配置优化，编辑php.ini文件 Zabbix详细安装部署Zabbix 是一个高度集成的网络监控解决方案，可以提供企业级的开源分布式监控解决方案，由一个国外的团队持续维护更新，软件可以自由下载使用，运作团队靠提供收费的技
转载
2024-05-03 22:37:30
451阅读
准备三台虚拟机，确保三台都能够上网，我的第一台机器为192.168.150.129，第二台为192.168.150.130，第三台为192.168.150.131，三台虚拟机都是centos7操作系统，并且关闭防火墙。1.zabbix-server端这一篇的基础上进行，所以zabbix-server端无需改动2.Nginx-server端192.168.150.130位Nginx主机，进行Ngin
转载
2024-04-11 11:41:49
114阅读
单位有一套曙光集群，80多个节点，安装的SUSE10.2，系统比较老，官网有些补丁要授权，安全漏洞多，决定来次整体系统升级，全部换成CentOS6.3。1.一台台的换？会死人，就算安装minimal，也需要20来分钟一台，装还要得配IP，HOSTNAME之类。2.使用kickstart做了个光盘镜像，百度一下很多结果，不做介绍了，试验了一下，相较1，可节约约5分钟。但还是和一台台装，而且要刻盘。3
转载
2024-01-15 22:28:12
4阅读
