hive自定义函数1、自定义函数的基本介绍Hive 自带了一些函数，比如：max/min等，但是数量有限，自己可以通过自定义UDF来方便的扩展。当Hive提供的内置函数无法满足你的业务处理需要时，此时就可以考虑使用用户自定义函数（UDF：user-defined function）根据用户自定义函数类别分为以下三种：UDF（User-Defined-Function） 一进一出UDAF（User-
转载
2023-07-20 18:34:26
227阅读
编写UDF函数(1)创建项目:(2)导入依赖:(3)继承UDF类(4)业务代码(5)打包编译(5)添加到hive类路径(6)创建临时函数(7)使用测试 Hive 自带了一些函数，比如：max/min 等，但是数量有限，自己可以通过自定义 UDF 来 方便的扩展。 2）当 Hive 提供的内置函数无法满足你的业务处理需要时，此时就可以考虑使用用户自定义 函数（UDF：user-defined fu
转载
2023-07-12 11:13:30
59阅读
作者：duktig背景学习完Hadoop，有没有感到编写一个MapReduce程序非常复杂，想要进行一次分析和统计需要很大的开发成本。那么不如就来了解了解Hadoop生态圈的另一名成员——Hive。让我们一起来了解，如何使用类SQL语言进行快速查询和分析数据吧。前边文章我们了解了Hive的概述、DDL语句和DML语句（重点）、分桶表和分区表，这篇文章主要了解Hive的常用函数和压缩存储。函数系统内
转载
2023-09-16 19:59:24
193阅读
UDF（User-Defined-Function）一进一出创建UDF的一般步骤（1）继承 org.apache.hadoop.hive.ql.UDF
（2）需要实现 evaluate 函数；evaluate 函数支持重载；
（3）添加 jar
add jar linux_jar_path
（4）创建 function
create [temporary] function [dbname.]fu
转载
2023-10-10 13:59:47
97阅读
# Hive Function: ROUND
## Introduction
When working with data in Hive, it is often necessary to manipulate and transform the data using various functions. One such function is the `ROUND` function,
原创
2023-10-11 15:58:17
48阅读
# Hive Function Default
Apache Hive is a data warehouse infrastructure built on top of Hadoop for providing data summarization, querying, and analysis. Hive enables users to write SQL-like queries ca
原创
2024-03-23 08:13:12
24阅读
# Sentry Hive Function实现流程
## 概述
在开始讲解Sentry Hive Function实现的具体步骤之前，我们首先来了解一下什么是Sentry。Sentry是一个开源的实时错误追踪平台，它可以帮助我们监控和追踪应用程序中的异常和错误。而Hive Function则是Hive提供的一种机制，它允许我们定义和注册自定义函数，以便在Hive查询中使用。
在本文中，我们将
原创
2023-10-09 09:58:03
51阅读
转载
2023-08-19 17:44:07
136阅读
文章目录标准sql里的窗口函数和分析函数介绍（为什么引入窗口函数）Window functions的类型Aggregate Window FunctionsRanking Window FunctionsValue Window Functions语法例子创建数据库和用户创建表和初始化数据根据城市分组求每个城市的总销售额根据城市分组按照订单销售额从高到低给订单排序根据销售额排序获取每个订单前2数
转载
2023-10-08 07:33:07
113阅读
PgSQL · 案例分享 · PostgreSQL 性能诊断指南背景数据库的性能优化是一个非常经典的话题，数据库的优化手段以及优化的角度也各不相同。例如，可以从OS内核、网络、块设备、编译器、文件系统、SQL、数据库参数、业务逻辑、源码等各个方面去进行优化。但是如果在优化前了解瓶颈在什么地方，可以向打鼹鼠一样，先打大的，起到事半功倍的效果。本文将针对Linux平台下的PostgreSQ
转载
2024-10-08 16:38:15
64阅读
分享关于Hive生产中使用GIS函数的方法
原创
2019-07-02 09:31:40
1608阅读
hive 默认自带了很多函数，以方便我们的日常使用 我们可以使用show functions; 命令进行查看目前可以使用的function; 可以使用如下的命令 查看某一个函数的使用方法hive (default)> desc function extended split;
OK
tab_name
split(str, regex) - Splits str around occuranc
转载
2024-07-26 12:12:33
54阅读
Hive表的相关操作
Hive是一个数据仓库，它可以把结构化的数据文件映射为一张数据库表，并且有SQL语言的查询功能。
注意：一般来说数据仓库存放的是一些历史数据，它的作用是用来做查询分析，往往不会用来做单条记录的增加、删除、修改
Hive表的创建语法与传统的关系型数据库类似，它是它的类型会更加复杂一些，如：它的类型可以是数组、Map……
环境：CDH 5.16Hive 1.1.0已开启KerberosHive 授权使用SQL StandardsBased Authorization模式（以下简称SSBA模式）症状表现：在编译好UDF的jar包之后，上传到HDFS目录。hdfs dfs -mkdir /udf
hdfs dfs -put -f my_udf.jar /udf 以管理员用户hive，进入beeline客户端。 切换到管
转载
2024-02-04 11:11:52
97阅读
1. 创建临时function (这里两个包都是hive自带的，不需要自己开发的，可以根据名称查找对应的版本)add jar /opt/local/hive/lib/hive-contrib-2.3..jar;
add jar /opt/local/hive/lib/mysql-connector-java-5.1.-bin.jar;
CREATE TEMPORARY FUNCTION dbout
转载
2023-07-26 15:05:19
118阅读
## Hive desc function报错解决流程
### 1. 问题描述
在Hive中使用`desc`函数时报错，需要解决此问题。
### 2. 解决流程
以下表格展示了解决此问题的步骤：
| 步骤 | 动作 |
| ---- | ---- |
| 步骤1 | 确认Hive版本 |
| 步骤2 | 确认表是否存在 |
| 步骤3 | 确认表是否有权限 |
| 步骤4 | 检查Hiv
原创
2023-09-24 08:55:41
163阅读
# 如何查看Hive用户磁盘使用情况
在Hive中，磁盘使用情况是一个重要的指标，可以帮助我们监控和优化存储资源。我们可以通过一些命令和工具来查看Hive用户的磁盘使用情况。
## 1. 使用Hive命令查看用户磁盘使用情况
可以使用Hive的DESCRIBE FORMATTED命令来查看数据表的详细信息，其中包括磁盘使用情况。
```markdown
DESCRIBE FORMATTED
原创
2024-04-15 06:16:00
55阅读
# 实现 "hive Invalid function NULLIF" 的步骤
## 概述
在Hive中，NULLIF函数用于比较两个表达式，若相等则返回NULL，否则返回第一个表达式的值。这篇文章将向你介绍如何使用Hive的NULLIF函数，并给出示例代码和解释。
## NULLIF函数的使用步骤
以下是实现 "hive Invalid function NULLIF" 的步骤的表格展示：
原创
2024-01-03 04:49:51
168阅读
外部表概述外部表只能在Oracle 9i之后来使用。简单地说，外部表，是指不存在于数据库中的表。通过向Oracle提供描述外部表的元数据，我们可以把一个操作系统文件当成一个只读的数据库表，就像这些数据存储在一个普通数据库表中一样来进行访问。外部表是对数据库表的延伸。外部表的特性 位于文件系统之中，按一定格式分割，如文本文件或者其他类型的表可以作为外部表。对外部表的访问可以通过SQL语句来
Hive 之 函数 03-系统内置函数 及 自定义函数一、 系统内置函数1.1 查看系统自带的函数1.2 显示自带的函数的用法1.3 详细显示自带的函数的用法二、 自定义函数2.1 概述2.2 自定义 UDF 函数2.2.1 创建一个Maven 工程；2.2.2 导入依赖2.2.3 创建一个 Java 类2.2.4 生成 jar 包， 并拷贝到服务器中 Hive 的 lib 下2.2.5 添加
转载
2023-08-18 22:59:59
33阅读
