1、什么是Hive？Hive：由Facebook开源用于解决海量结构化日志的数据统计(海量的结构化数据的运算分析)。Hive是基于Hadoop的一个数据仓库工具(服务性的软件)，可以将结构化的数据文件映射为一张表，并提供类似于SQL查询。本质是：将Hive SQL转化成MapReduce程序 或者 spark程序 1）Hive处理的数据存储在HDFS2）Hive分析数据底层的实现是Map
转载
2023-07-14 12:01:23
149阅读
hive 体系架构启动 hive 命令行进入hive安装目录，输入bin/hive的执行程序，或者输入 hive –service clihive脚本的执行方式大致有三种hive可以直接敲hive命令进入interactive模式，直接使用hive交互式模式 也可以hive -e 执行简单命令或者hive -f 执行一个sql脚本文件hive -e “SQL”执行; eg : hive
转载
2023-07-18 11:37:12
26阅读
1. Hive是什么1.1 hive的概念Hive：由Facebook开源，用于解决海量（结构化日志）的数据统计。Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。本质是：将Hive SQL转化成MapReduce程序1.2 Hive与数据库的区别Hive 具有 SQL 数据库的外表，但应用场景完全不同。Hive 只适合用来做海量离线数据统计
转载
2023-07-14 11:38:32
281阅读
1.写udf函数UDF(User-Defined-Function)，用户自定义函数对数据进行处理。STEP1：创建UDF函数 ①自定义UDF需要继承org.apache.hadoop.hive.ql.UDF ②需要实现evaluate函数STEP2：将udf打jar包，并上传到hive server上STEP3：进入hi...
原创
2022-01-17 14:05:37
245阅读
# Hive用户手册实现流程
## 介绍
Hive是一个基于Hadoop的数据仓库工具，它提供了一个类似于SQL的查询语言，使得开发者可以通过类SQL语句来处理大规模的结构化数据。本文将介绍如何实现一个Hive用户手册，帮助新手快速上手使用Hive。
## 实现步骤
下面是实现Hive用户手册的步骤，我们将用表格的形式展示。之后会详细介绍每一步的具体操作。
| 步骤 | 操作 |
| --
原创
2024-01-19 12:41:24
42阅读
基于Hadoop的大数据的计算/扩展能力支持SQL like查询语言统一的元数据管理简单编程Hive的安装1.1在hadoop生态圈中属于数据仓库的角色。他能够管理hadoop中的数据，同时可以查询hadoop中的数据。 本质上讲，hive是一个SQL解析引擎。Hive可以把SQL查询转换为MapReduce中的job来运行。 hive有一套映射工具，可以把SQL转换为Ma
转载
2023-07-20 18:57:10
43阅读
# 实现“hive SQL 语句 手册”的教程
## 1. 概述
作为一名经验丰富的开发者，我将教会你如何实现“hive SQL 语句 手册”。在这个过程中，我们将使用Hive SQL语句来创建数据库表、插入数据、查询数据等操作。
## 2. 教程步骤
下面是整个实现过程的步骤表格：
```mermaid
journey
title 教程步骤
section 安装环境
原创
2024-04-24 07:16:04
34阅读
Hive提供了jdbc驱动，使得我们可以用java代码来连接Hive并进行一些类关系型数据库的sql语句查询等操作。首先，我们必须将Hive的服务，也就是HiveServe打开。在Hive 0.11.0版本前，只有HiveServer服务可用，但是HiveServer本身存在很多问题（比如：安全性、并发性等）；针对这些问题，Hive-0.11.0版本后提供了一
转载
2023-07-21 16:51:49
64阅读
前言语法:DROP TABLE [IF EXISTS] table_name [PURGE]; -- (Note: PURGE available in Hive 0.14.0 and later)删除此表的元数据和数据。如果配置了Trash (没有指定 PURGE)，数据实际上会移动到 .Trash/Current 目录。元数据完全丢失。删除外部表时，表中的数据不会从文件系统中删除。当删
转载
2021-01-19 18:46:30
1818阅读
2评论
博客分类：
hive nosql
官方定义见： https://cwiki.apache.org/confluence/display/Hive/LanguageManual+UDF .内置运算符 1.1关系运算符 运算符 类型 说明 A = B 所有原始类型 如果A与B相等,返回TRUE,否则返回FALSE A == B 无 失败，因
转载
2023-01-01 13:59:03
91阅读
在这篇博文中，我们将详细探讨“Hive CDH 连接手册”的问题解决方案。我们将从环境准备开始，逐步深入到分步指南、配置详解、验证测试、优化技巧和排错指南。为了便于理解，我们将使用多种图表和代码示例来增强内容的可读性。
## 环境准备
在准备环境时，确保满足以下软硬件要求：
### 硬软件要求
- **操作系统**: Ubuntu 18.04 或 CentOS 7
- **内存**: 至少
文章目录1 Hive基本概念1.1 Hive简介1.1.1 什么是Hive1.1.2 为什么使用Hive1.1.3 Hive特点1.2 Hive的体系架构1.3 Hive和RDBMS的对比1.4 Hive的数据存储2 Hive基本使用2.1 Hive存储格式2.2 Hive中的数据模型3 Hive应用3.1 Hive内置函数3.2 SQL介绍与Hive应用场景3.2.1 数据库操作和表操作3.2
转载
2023-07-14 11:41:42
0阅读
翻译Hive官方文档系列，文中括号中包含 注: 字样的，为我自行标注的，水平有限，翻译不是完美无缺的。如有疑问，请参照Hive官方文档对照查看。内容列表 Cloudera制作的Hive介绍视频 安装与配置 系统需求 安装Hive发行版 从Hive源码编译 运行Hive 配置管理概览 运行时配置 Hive, Map-Reduce 与本地模式 错误日志 DDL 操作 元数据存储 DM
翻译
精选
2012-07-23 16:18:12
10000+阅读
点赞
Hive常用操作命令一、 基本数据类型Hive数据类型Java数据类型长度例子TINYINTbyte1byte有符号整数20SMALINTshort2byte有符号整数20INTint4byte有符号整数20BIGINTlong8byte有符号整数20BOOLEANboolean布尔类型，true或者falseTRUE FALSEFLOATfloat单精度浮点数3.14159DOUBLEdoubl
转载
2023-07-12 21:09:26
267阅读
1. Hudi表对应的Hive外部表介绍Hudi源表对应一份HDFS数据，可以通过Spark，Flink 组件或者Hudi客户端将Hudi表的数据映射为Hive外部表，基于该外部表， Hive可以方便的进行实时视图，读优化视图以及增量视图的查询。2. Hive对Hudi的集成这里以Hive3.1.1、 Hudi 0.9.0为例， 其他版本类似•将hudi-hadoop-mr-bundle-0.9.
原创
2021-12-21 15:21:06
290阅读
# hive3.1.0安装部署手册
## 导言
Hive是一个基于Hadoop的数据仓库基础设施，可以提供类似SQL的查询语言HiveQL来查询和分析存储在Hadoop中的大规模数据集。本文将指导你如何安装和部署Hive3.1.0版本。
## 步骤概览
下面是安装和部署Hive3.1.0的主要步骤。
| 步骤 | 描述 |
| ---- | ---- |
| 步骤1：安装Java | 确保
原创
2023-07-30 12:28:41
248阅读
# Hive 使用手册指南
Hive 是一个基于 Hadoop 的数据仓库软件，可以通过类 SQL 语言查询、汇总和分析存储在 Hadoop 分布式文件系统（HDFS）中的海量数据。它简化了大数据存储和处理的复杂度，让用户能够更为直观地对数据进行操作。
## Hive 的基本概念
Hive 提供了一种将数据存储于 HDFS 的方式，并通过表的形式来组织数据。用户可以使用 HiveQL（Hiv
摘要智能运维AIOps平台结合大数据和机器学习功能来支持IT运维。I&O（基础设施和运维/运营）领导人应该开始部署这样的平台，以加强目前的性能监控，但计划需要5年时间来扩展到服务台和自动化系统。概述- 关键发现 在过去的三年里，IT部门分别部署了大数据和机器学习技术，以支持IT运维的监控。然而，在过去的6个月里，企业开始将他们的IT运维导向的大数据和机器学习项目结合起来，并将它们扩展到服务
转载
2024-01-29 06:36:39
80阅读
1.安装模式介绍： Hive官网上介绍了Hive的3种安装方式，分别对应不同的应用场景。 a、内嵌模式（元数据保村在内嵌的derby种，允许一个会话链接，尝试多个会话链接时会报错） b、本地模式（本地安装mysql 替代derby存储元数据） c、远程模式
转载
2023-06-05 10:20:18
295阅读
Hive 的官网：http://hive.apache.org/Hive versions 1.2 onward require Java 1.7 or newer.上一篇提到的 MapRedue 虽然简化了分布式应用的实现方式，但还是离不开写代码。Hive 简介Hive 是基于 Hadoop 的一个【数据仓库工具】，可以将结构化的数据文件映射为一张 hive 数据库表，并提供简单的 sql 查询
转载
2023-10-25 10:03:16
300阅读
