目录Hadoop的安装与运行1. 笔者所用环境2. 从安装到运行2.1 设置SSH登录权限2.2 安装JAVA环境2.3 安装hadoop2.4 进行伪分布式配置2.5 启动伪分布式hadoop2.6 处理WARN2.7 运行Hadoop伪分布式实例Hadoop的安装与运行 Hadoop的安装大致分为5步：创建hadoop用户（Mac系统就用自己的用户吧，这一步就省略了，免得引起不必要
转载
2023-07-14 16:13:47
327阅读
题记：学vue有一段时间了，终于今天下定决心每日书写一篇学习笔记。1.访问node.js官网：https://nodejs.org/en/下载对应安装包。点击添加图片描述（最多60个字）编辑2.安装完成，在终端输入 ：node -v如果返回版本号，代表安装成功。建议安装之前给目录权限，至于怎么给目录权限，这里不做说明，网上有很多资料。3.安装淘宝镜像至于为何要安装淘宝镜像，因为有帐幕阻挡我们访问n
# Hadoop在Linux下的安装与使用
> 作者：[你的名字]
Hadoop是一个开源的分布式计算框架，用于处理大规模数据集的分布式存储和处理。由于其高效可靠的特性，Hadoop被广泛应用于大数据领域。然而，Hadoop只能安装在Linux操作系统上。本文将介绍如何在Linux上安装和配置Hadoop，并给出一些简单的示例代码。
## Linux
原创
2023-08-17 08:20:41
119阅读
说明：该文章以4台centos系统为案例配置hadoop基础集群，节点名字分别为hadoop02,hadoop03,hadoop04,hadoop051.基础集群环境准备1.1修改主机名在root用户下：vi /etc/sysconfig/network或者如何配置了hadoop账户的sudo权限，则在hadoop登陆情况下使用命令 sudo vi/etc/sysconfig/network修改
本教程是在 Centos6 下使用yum来安装 CDH5 版本的 hadoop 的教程。 如果没有添加yum源的请参考上一个教程：Hadoop架构图 NameNode、DataNode和ClientNameNode可以看作是分布式文件系统中的管理者，主要负责管理文件系统的命名空间、集群配置信息和存储块的复制等。NameNode会将文件系统的Meta-data存储在内存中，这些信息主要包括了文
# 安装 MySQL 在 MacOS 13 上的步骤指南
## 1. 简介
MySQL 是一款常用的开源关系型数据库管理系统，适用于多种操作系统平台。本文将提供一个详细的步骤指南，教会你如何在 MacOS 13 上安装 MySQL。
## 2. 安装步骤概览
下面是安装 MySQL 的整个过程的步骤概览：
| 步骤 | 描述
原创
2023-10-21 04:02:41
187阅读
安装mysql8.0的过程步骤1.下载mysql2.配置mysql环境变量3.安装微软常用运行库合集4.安装mysql服务5.检查注册表6.开启mysql服务7.更改mysql的密码 1.下载mysql下载地址：https://dev.mysql.com/downloads/mysql/ 第一种： 第二种： 如果需要自动安装则点击“Go to Download Page >”，如图：下载完
转载
2024-04-26 17:34:11
218阅读
Hive的运行需要在Hadoop环境下Hive使用Hadoop，所以：您必须在您的路径中安装Hadoopexport HADOOP_HOME=<hadoop-install-dir>此外，在创建hive表时，必须使用以下命令HDFS创建/tmp和/user/hive/warehouse（又名hive.metastore.warehouse.dir），并设置它们权限chmod g+w&n
转载
2023-07-12 17:58:48
49阅读
# Dolphinscheduler安装步骤
## 1. 概述
Dolphinscheduler是一个分布式任务调度平台，用于实现大数据任务的自动化调度和运维，可以与Hadoop集群进行集成。在安装Dolphinscheduler之前，需要确认它是否需要安装在Hadoop集群中，以便正确配置环境。
## 2. 流程图
```mermaid
flowchart TD
A[确认Dolphi
原创
2023-12-08 11:55:52
217阅读
# Hive 安装与使用指南
Hive 是一个基于 Hadoop 的数据仓库工具，可以用于数据的查询和分析。虽然 Hive 通常与 Hadoop 集群一起使用，但实际上我们可以将 Hive 安装在 Hadoop 集群以外的环境中。这种灵活性使得 Hive 可以处理各种大数据环境。本篇文章将介绍如何在非 Hadoop 环境中安装 Hive，并包含示例代码及相关图示。
## Hive 的非 Had
原创
2024-08-29 04:54:51
183阅读
安装和配置Hadoop 集群1 网络拓扑通常来说，一个Hadoop 的集群体系结构由两层网络拓扑组成，如图2-1 所示。结合实际的应用来看，每个机架中会有30 ～ 40 台机器，这些机器共享一个1GB 带宽的网络交换机。在所有的机架之上还有一个核心交换机或路由器，通常来说其网络交换能力为1GB 或更高。可以很明显地看出，同一个机架中机器节点之间的带宽资源肯定要比不同机架中机器节点间丰富。这也是Ha
转载
2023-08-15 22:27:19
57阅读
00 大概步骤1、在 Master 节点上配置 hadoop 用户、安装 SSH server、安装 Java 环境2、在 Master 节点上安装 Hadoop，并完成配置 3、在其他 Slave 节点上配置 hadoop 用户、安装 SSH server、安装 Java 环境 4、将 Master 节点上的 /usr/local/hadoop 目录复制到其他 Slave 节点上 5、在 Mas
转载
2023-09-30 13:51:26
94阅读
默认 JAVA 已安装成功第一步：安装 HomeBrew ，HomeBrew 官网：https://brew.sh/
打开 Mac 终端，复制下面的话并回车/usr/bin/ruby -e "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/master/install)"第二步：配置SSH为了确保在远程管理 Hadoo
转载
2023-07-24 09:00:11
83阅读
MacOS Big Sur Beta 测评｜使用体验｜有哪些BUG？｜实际体验如何？前言今年的WWDC可谓是相当精彩啊•IOS 14•Siri•IPadOS•Apple Pencil•iWatch•macOS Big Sur•AirPods Pro•自研 ARM CPU苹果提出了很多创新和思想，其中对于程序猿而言，我觉得值得关注的就是操作系统和CPU了而今天的主角是MacOS Big Sur，这里
zookeeper 安装1 禁用防火墙和 selinux2 设置 /etc/hosts ip 主机名对应关系3 安装 openjdkzookeeper 角色，选举
leader 集群主节点
follower 参与选举的附属节点
observer 不参与选举的节点，同步 leader 的命名空间
解压包：
tar -zxf zookeeper-3.4.10.tar.gz
拷贝:
cp -r zook
文章目录什么是HBase一、事前准备1、虚拟机上安装有Hadoop2、虚拟机上安装有Zookeeper3、HBase安装包二、安装HBase三、HBase的三种运行模式1、本地模式2、伪分布模式3、全分布式 什么是HBaseHbase的名字的来源是Hadoop database，即hadoop数据库； 适合于存储大表数据（表的规模可以达到数十亿行以及数百万列），并且对大表数据的读、写访问可以达到
转载
2023-10-12 22:24:46
63阅读
文章目录前言1.上传安装包到centos2.解压3.重命名4.配置环境变量5.修改/.bashrc6.修改配置文件6.1 hbase-env.sh6.2 hbase-site.xml6.3 regionservers7.复制到其他节点8.启动9.查看进程10.Web窗口总结 前言本教程在前面教程的基础上安装集群模式的hbase。hbase安装包和配置文件在正文。hbase依赖于Hadoop和zo
转载
2024-08-02 13:11:40
32阅读
1.材料准备1.Ubuntu映像2.系统启动u盘3.移动硬盘（用u盘当装机盘，把系统装到硬盘里，不可以装机盘和系统盘是一个盘，要确保有系统启动u盘和移动硬盘是两个设备）4.先格式化移动硬盘，如果你还想把硬盘当u盘使用使用分区助手可以对硬盘进行分区，Ubuntu的分区必须是fat32格式 5.挂载分区时swap、ufi启动引导分区、根分区是必须的相关阅读：U盘操作系统安装工具-
一、安装虚拟机 1、可以去浏览器上找，有许多虚拟机的下载安装教程。这个一般不会遇到什么问题，都能够成功安装，如果遇到问题就去网上搜吧。 2、如果不是正版的虚拟机会需要激活秘钥，这个也可以从网上找到，直接搜你的版本的激活秘钥就可以了。 二、在虚拟机上安装Linux （1）打开虚拟机 （2）创建新的虚拟机 （3）我们这里选的是典型 （4）选择安装程序光盘映像文件，选择你的映像文件（映像文件可以从网上下
转载
2023-07-25 20:56:31
634阅读
中文名称：x86版 MacOS X的安装.附详细安装图解英文名称：tiger-x86.tar.bz2发行时间：2005年长久的苹果梦，今日终见曙光——x86版Mac OS X的安装引用 苹果的OSX系统是无数PC玩家梦想的东西，无奈对绝大多数人来说，都不可能在已有一台PC的情况下，纯粹出于爱好而去购买一台Mac。因而无数的Mac界面外壳、Mac OS模拟器运应而生。但界面外壳的模拟终究是徒有其表，
