安装hivehive是一个基于hadoop的数据仓库，实质即为一个将MR任务封装为易于编写的hql语句（类似于sql语句）的组件。hive基于hadoop，因此运行hive必须安装hadoop，而hadoop则必须安装jdk。hive作为一个数据仓库，自然需要存储元数据，其内置有一个derby数据库用于存储元数据，但使用derby作为元数据库时只允许单用户单会话连接，生产实用时过于受限，因此常使用
转载
2023-09-20 10:39:14
30阅读
Hive这个框架在Hadoop的生态体系结构中占有及其重要的地位，在实际的业务当中用的也非常多，可以说hadoop之所以这么流行在很大程度上是因为hive的存在。那么Hive究竟是什么，为什么在Hadoop家族中占有这么重要的地位，本篇文章将围绕Hive的体系结构(架构)、Hive的操作、Hive与Hbase的区别等对Hive进行全方面的阐述。
转载
2023-08-25 07:44:44
25阅读
前言本教程采用了两种方案一种是hive-1.21版本,hadoop版本为hadoop2.6.5还有一种是主要讲基于hadoop3.x hive的搭建 先来第一种一、本地方式(内嵌derby)步骤这种存储方式需要在本地运行一个mysql服务器，并作如下配置解压修改安装包内conf文件夹下的hive-default.xml.template，并重命名为hite-site.xmljavax.
转载
2023-08-22 14:31:40
500阅读
数据仓库工具。构建在hadoop上的数据仓库框架，可以把hadoop下的原始结构化数据变成Hive中的表。（主要解决ad-hoc query，即时查询的问题）支持一种与SQL几乎完全相同的语言HQL。除了不支持更新，索引和事务，几乎SQL其他的特性都支持。可以看成是SQL到Map-reduce的映射器提供shell,JDBC/ODBC,Thrift,Web等接口
转载
2024-08-02 14:30:45
449阅读
第十二章 Hive一、示例①声明一个表，三列:year,temperature,quality create table records (year string, temperature int,quality int) row format delimited #HiveQL所特有，声明每一行是由制表符分隔的文本，按此格式读取数据 fields terminated by ‘\t’ ②
转载
2024-06-02 09:52:20
38阅读
云原生大数据组件研究（Hive+Hadoop）前言网上的找的文档大多残缺不靠谱，所以我整理了一份安装最新版本的hive4..0.0+hadoop3.3.4的学习环境，可以提供大家安装一个完整的hive+hadoop的环境供学习。由于在公司担任大数据的培训工作后续还会更新一些基础的文章,希望能帮助到大家。
一、安装Hadoop3.3.4
前置：集群规划机器信息Hostnamek8s-master
转载
2023-08-16 21:22:02
481阅读
Hadoop版本与Hive版本是大数据处理领域中非常重要的两个概念。Hadoop是一个用于处理大规模数据集的分布式计算框架，而Hive则是基于Hadoop的数据仓库基础设施。本文将为您介绍Hadoop和Hive的基本概念、使用方法以及它们之间的关系。
# Hadoop简介
Hadoop是由Apache基金会开发的一个开源分布式计算框架。它通过将大规模数据集分成多个小块，并将这些小块分布式存储在集
原创
2023-11-07 15:41:34
38阅读
一、下载安装包并解压
在官网下载最新版的hive包，apache-hive-3.1.3-bin.tar.gz,并进行解压
转载
2023-07-12 08:42:37
140阅读
Hadoop 系列之 HiveHive 的官网：http://hive.apache.org/Hive versions 1.2 onward require Java 1.7 or newer.上一篇提到的 MapRedue 虽然简化了分布式应用的实现方式，但还是离不开写代码。Hive 简介Hive 是基于 Hadoop 的一个【数据仓库工具】，可以将结构化的数据文件映射为一
转载
2023-08-28 21:28:09
711阅读
Hive是基于Hadoop的一个数据仓库工具，用来进行数据提取、转化、加载，这是一种可以查询和分析存储在Hadoop中的大规模数据的机制。Hive数据仓库工具能将结构化的数据文件映射为一张数据库表，并提供SQL查询功能，能将SQL语句转变成MapReduce任务来执行。关于Hive的描述可以归结为这么几点来理解：Hive是工具。Hive可以用来构建数据仓库。Hive具有类似SQL的操作语句HQL。
转载
2023-07-28 20:43:21
155阅读
# 实现“hive hadoop 版本”流程
## 1. 确定环境和工具
首先，你需要确认你的开发环境中已安装以下工具：
- Hadoop：用于分布式存储和处理大规模数据的开源框架。
- Hive：一个基于Hadoop的数据仓库基础设施，用于数据提取、转换和加载。
如果你的环境中没有安装这些工具，你可以参考官方文档进行安装。
## 2. 创建Hive表
接下来，你需要使用Hive来创建
原创
2023-10-29 06:57:01
2阅读
出于安全稳定考虑很多业务都需要服务器服务器Hadoop+Hive搭建，但经常有人问我，怎么去选择自己的配置最好，今天天气不错，我们一起来聊一下这个话题。Hadoop+Hive环境搭建1虚拟机和系统安装+JDK环境JDK安装采用二进制包压缩方式(解压之后就是直接可用了，但需要修改环境变量，使其任何路径下都可行)修改/etc/profile，~/.bashrc 配置文件，修改环境变量。2 Hadoop
转载
2023-07-12 11:13:26
52阅读
一、准备要求安装好hadoop 2.x版本的三节点集群,并配置好JAVA_HOME和HADOOP_HOME两个环境变量。如果还没准备好请参考【三节点hadoop2大数据环境安装教程】，有些同学可能会在hadoop3环境下安装1.2.2，但是在启动hive的时候会报错提示版本不兼容的问题。二、主题讲解hive1.2.2版本的三种常见安装部署模式三、目标熟练搭建内嵌式hive环境熟练搭建本地式hive
转载
2024-04-19 12:00:52
104阅读
1. 准备工作1) 版本选择Hadoop+Hbase+Hive一般设计大数据业务的必选组件，首先选择兼容的组件进行搭建至关重要，环境搭建好不会轻易的换版本，选择一个兼容性强，稳定的版本。本文选择组件hadoop2.6.0,Hbase0.96.2,Hive1.13.1,现阶段此种组合算是比较新的。0.98.8版本兼容性不好，以至于遗弃而选择0.96.2.软件官方下载地址：http
转载
2024-02-29 10:32:49
1398阅读
写在前面：hive默认使用derby数据库作为元数据的数据库下载 hive 安装包 apache-hive-1.2.1-bin.tar.gz下载地址解压缩（我是放在/opt目录下的）tar -zxf apache-hive-1.2.1-bin.tar.gz 然后给文件重命名：mv apache-hive-1.2.1-bin.tar.gz hive-1.2.1配置环境变量(vi /etc/profi
转载
2024-10-30 17:07:00
50阅读
hive2.x特性LLAP（Live Long and Process）Hive2.1进行了极大的性能优化。在Hive2.x开启LLAP与Apache Hive1.x进行对比测试，其性能提升约25倍。支持使用HPL/SQL的存储过程，Hive2.0.0推出的Hive Hybrid Procedural SQL On Hadoop (HPL/SQL) 是一个在Hive上执行过程SQL的工具，
转载
2023-07-14 23:29:17
217阅读
一、hive的基本概念与原理Hive是基于Hadoop之上的数据仓库，可以存储、查询和分析存储在 Hadoop 中的大规模数据。Hive 定义了简单的类 SQL 查询语言，称为 HQL，它允许熟悉 SQL 的用户查询数据，允许熟悉 MapReduce 开发者的开发自定义的 mapper 和 reducer 来处理内建的 mapper 和 reducer 无法完成的复杂的分析工作。Hive 没有专门
转载
2023-07-12 11:14:19
109阅读
一、hive相关知识复习复习一下hadoop的数据仓库hive，它的元数据存储在第三方数据库中，实际数据存储在hadoop的hdfs上，所以hive不能脱离hadoop与第三方数据库单独存在，我们前面已经安装好了hadoop2.7.3版本，只要安装一个第三方数据库即可满足hive安装的依赖环境，这里我选择安装的是mysql5.5.46，hive选择安装的是1.2.1版本。hive将结构化的数据文件
转载
2023-08-06 23:28:18
1154阅读
# Hive 和 Hadoop 版本的实现
## 介绍
在数据处理领域，Hadoop是一个广泛使用的分布式数据处理框架，而Hive是一个建立在Hadoop之上的数据仓库基础设施，用于提供数据查询和分析。在实际应用中，我们需要确保Hive和Hadoop版本的兼容性，以确保系统的正常运行。本文将向你介绍如何实现Hive和Hadoop版本的匹配。
## 流程概述
下面是实现Hive和Hadoop版本
原创
2023-09-14 18:21:48
227阅读
在大数据处理领域，Apache Hive与Hadoop之间的依赖性是一个重要话题。通常情况下，Hive版本与Hadoop版本之间会存在一些兼容性问题，这可能导致安装和运行时的各种错误。因此，准确理解Hive依赖Hadoop版本的问题，以及在实践中成功解决它们，对于从业者至关重要。在这篇文章中，我们将详细记录解决“hive 依赖hadoop版本”问题的整个过程，包括环境预检、部署架构、安装过程、依赖
