转载 2019-10-31 16:32:00
188阅读
2评论
在Linux操作系统中安装Hadoop2.8是一个非常常见的任务,特别是对于那些希望运行大规模数据处理任务的用户来说。Hadoop是一个开源的分布式计算框架,被广泛应用于处理大数据集。而Linux系统是Hadoop最常用的运行环境之一。在本文中,将介绍如何在Linux操作系统上安装Hadoop2.8版本。 首先,要安装Hadoop2.8,我们需要下载Hadoop安装包。可以在Hadoop的官方
原创 2024-05-29 10:06:46
43阅读
Hadoop编译步骤:1.解压Hadoop源码包[root@hadoop000~]#mkdir-p/opt/sourcecode[root@hadoop000~]#mkdir-p/opt/software[root@hadoop000sourcecode]#cd/opt/sourcecode#将hadoop-2.8.1-src.tar.gz下载(或者用rz上传)到sourcecode目录[root
原创 2018-05-16 16:34:14
1506阅读
1点赞
Hadoop集群搭建之Hive安装1. 准备工作准备好已经安装Hadoop的集群服务器之后,需要在其中一台中安装MySQL数据库,安装可以参考CentOS7安装MySQL5.7这篇文章。下载Hive安装包并上传至其中一台服务器中,下载地址2. Hive本地安装1. 安装目录规划统一安装路径:/opt/modules 统一软件存放路径:/opt/software2. 上传压缩包1. 将压缩包上传
转载 2023-09-08 20:32:19
34阅读
Hive简介Hive是基于hadoop的一个数据仓库,可以将sql语句转化为MapReduce任务进行运行,不必要专门开发MapReduce,Hive定义了简单的类SQL,即HQL,可以用来对数据进行ETL(提取转化加载)操作。一 . 安装前准备Hive是基于hadoop的,所以首先要安装hadoop集群,至于安装hadoop可以参考,如和选择版本,在官网上http://hive.apache.
转载 2023-07-24 08:56:15
63阅读
Linux操作系统是一种开放源代码的操作系统,被广泛应用于各种领域,包括服务器和工作站。而Hadoop是一个开源的分布式计算框架,用于处理大规模数据集。对于需要处理大数据的企业来说,Linux操作系统和Hadoop框架是非常重要的工具。 在Linux操作系统上安装Hadoop并不复杂,但是有一些注意事项需要我们考虑。首先,我们需要确保Linux操作系统的版本兼容Hadoop框架的要求。例如,如果
原创 2024-04-03 10:18:25
58阅读
hive
原创 2018-08-29 18:49:46
1691阅读
HiveHadoop集群下的安装 文章目录HiveHadoop集群下的安装一、hive安装前必备步骤二、安装Hive三、配置Hive的环境变量四、测试连接 一、hive安装前必备步骤Hadoop集群能正常运行安装参考MySql安装 安装参考 需要增加以下步骤: 1)输入 :my -uroot -pok 启动数据库 2)输入:use mysql创建用户:create user 'bigdata'
转载 2023-07-04 10:58:12
60阅读
 目录一.Hive安装和配置1.Hive并不是hadoop自带的组件,因此我们需要去下载hive,此次课我们使用hive 1.2.1版本,下载地址为:2.下载完成之后,安装包默认保存在下载文件夹中,解压安装包apache-hive-1.2.1-bin.tar.gz至路径 /usr/local,命令如下:3.然后切换至目录 /usr/local,将文件夹名改为hive(为了后续的方便),
转载 2023-09-14 13:21:37
187阅读
mac上安装hadoop 1,mac下的javall /usr/bin |grep'java'默认:/System/Library/Frameworks/JavaVM.framework/Versions/Current/Commands/java具体的安装路径:/Library/Java/JavaVirtualMachines/下面, JAVA_HOME是/Library/J
原创 2017-06-18 18:54:01
2929阅读
安装数据仓库Hive实验目的要求实验环境软件版本实验步骤步骤一:Hive工具安装配置步骤二:开启zookeeper集群,Hadoop集群以及HBase集群步骤三:创建hive元数据数据库步骤五:Hive工具启动和验证 实验目的要求目的: 1、数据仓库工具Hive安装和配置 2、掌握数据仓库工具Hive安装和配置 要求: 1、完成Hive工具的安装和配置 2、Hive工具能够正常启动运行 3、
转载 2023-07-13 17:28:08
110阅读
一、所需软件 Java 必须安装Hadoop 2.7 及以后版本,需要安装 Java 7 ssh 必须安装并且保证 sshd 一直运行,以便用 Hadoop 脚本管理远端Hadoop 守护进程,如果没有安装,ubuntu系统:$ sudo apt-get install ssh $ sudo apt-get install rsync二、下载hadoop 地址:http://www.apache
转载 2023-07-03 21:12:47
89阅读
Hive目前底层还是用MapReduce,以后可能会用Spark,Tez。Hive差不多是一个查询接口,你的SQL语句还是会翻译成MapReduce任务的,你用explain就可以看到这些任务的执行计划。下面介绍下hive的基础安装过程以及简单的使用。环境信息:虚拟机数量:3台 操作系统:Ubuntu 14.04 实验环境及版本: HadoopHadoop 2.2.0 Java:java ver
转载 2023-07-24 10:59:56
104阅读
文章目录基于Hadoop的数据仓库Hive安装1、安装Hive1.1 下载Hive源程序1.2 解压并重命名1.3 修改文件权限1.4 配置环境变量1.5 配置hive-site.xml2、安装并配置MySQL2.1 下载mysql jdbc包2.2 解压并拷贝2.3 启动并登陆mysql shell2.4 新建hive数据库2.5 配置mysql允许hive接入2.6 启动hadoop2.7
转载 2023-09-14 13:39:42
100阅读
第一部分:环境配置(含操作系统、防火墙、SSH、JAVA安装等) Hadoop 2.8集群安装模拟环境为: 主机:Hostname:Hadoop host,IP:10.10.11.225 节点1:Hostname:Hadoopnode1,IP:10.10.11.254 两台机器均为Centos 7.
转载 2017-10-16 15:09:00
77阅读
2评论
本文主要是演示在Hadoop单机模式中Hive默认(嵌入式derby 模式)安装配置过程,目录结构如下:基础环境Hive安装配置启动及演示[一]、基础环境Mac OSX 10.9.1Java 1.6+ Hadoop 2.2.0 (安装配置详见: http://www.micmiu.com/opensource/hadoop/hadoop2x-single-node-setup
转载 2024-04-19 11:52:39
38阅读
1.show databases 查看有那些数据库2.创建park数据库,实际上hadoop的HDFS文件系统里创建一个目录节点,统一存在/usr/hive/wareshouse目录下3.进入数据库4.查看当前数据库下的所有表5.创建stu表,以及相关的两个字段 在hive中,用的是string,不用char和varchar,此外,所创建的表,也是HDFS里的一个目录节点。 在hive里面有一个d
转载 2023-07-20 19:37:15
73阅读
hive 安装实践,非常适合新手阅读
原创 2018-11-04 14:18:04
909阅读
# 使用Docker安装Hadoop Hive的完整指南 随着大数据技术的不断发展,Hadoop生态系统中的各种工具也愈发流行。Hadoop Hive作为一个重要的数据仓库工具,提供了SQL类似的查询功能,方便用户在大数据环境中进行复杂的查询操作。本文将介绍如何在Docker环境中安装Hadoop Hive,并通过代码示例指导你完成整个过程。 ## 1. 安装Docker 在开始之前,确保你
原创 8月前
77阅读
一、Hadoop安装 1)、启动 2)、创建hdfs目录 $ hadoop fs -mkdir /tmp $ hadoop fs -mkdir /user/ $ hadoop fs -mkdir /user/hive/ $ hadoop fs -mkdir /user/hive/warehouse
原创 2022-06-26 02:51:19
129阅读
  • 1
  • 2
  • 3
  • 4
  • 5