从SQL到HiveQL应转变的习惯 HiveQL是一种类似SQL的语言, 它与大部分的SQL语法兼容, 但是并不完全支持SQL标准, 如HiveQL不支持更新操作（行级别）, 也不支持事务, 它的索引，子查询和join操作也很局限, 这是因其底层依赖于Hadoop云平台这一特性决定的, 但其有些特点是SQL所无法企及的。例如多表查询、和集成MapReduce脚本等, 也支持create tabl
转载
2023-07-14 23:43:08
153阅读
数据库好处：可以持久化数据到本地2、结构化查询基础查询： 一、 语法 Select 查询列表 From 加表名二、 特点 1.查询列表可以是字段、常量、表达式、函数等等 2.查询结果是一张虚拟表三、示例 1.查询单个字段 2.查询多个字段 3.查询所有的字段 Select*from 4.查询常量 Select 常量 5查询函数 注意：字符型和日期型的常量值必须用单引号引起来，数值型不需要 6.查询
一、前言 作为一名phper，之前查询数据之类用的都是普通的sql,现在突然要用ES的DSL查询，实在是有点艰难。刚好在看大佬博客的时候，看到大佬提了一句关于sql转化的插件，于是立马去研究一下。二、那些年我们研究过的插件1、ElasticHQ工具（1）下载安装
（2）本地安装python 3.4+
（3）进入安装Elastic
转载
2024-07-16 22:11:32
84阅读
Hive基本SQL操作Hive DDL（数据库定义语言）1、数据库的基本操作--展示所有数据库
show databases;
--切换数据库
use database_name;
/*创建数据库
CREATE (DATABASE|SCHEMA) [IF NOT EXISTS] database_name
[COMMENT database_comment]
[LOCATIO
转载
2023-07-26 22:12:31
118阅读
HiveQL详解HiveQL是一种类似SQL的语言, 它与大部分的SQL语法兼容, 但是并不完全支持SQL标准, 如HiveQL不支持更新操作, 也不支持索引和事务,
它的子查询和join操作也很局限, 这是因其底层依赖于Hadoop云平台这一特性决定的, 但其有些特点是SQL所无法企及的。例如多表查询、支持create
table as select和集成MapReduce脚本等, 本节主要
转载
精选
2015-06-23 16:52:52
451阅读
# HiveQL简介与应用
Hive是一个基于Hadoop的数仓工具，它可以将结构化数据进行处理并提供SQL-like查询功能。而HiveQL（Hive Query Language）就是Hive用于查询的语言，几乎与标准的SQL相似，但有一些设计上的特点，使其能够更好地与Hadoop相结合。
## HiveQL的特点
1. **SQL-like语法**: HiveQL使用类似SQL的语法，
原创
2024-10-20 05:07:18
62阅读
转载
2019-11-07 14:31:00
111阅读
2评论
Hive是一个数据仓库基础的应用工具，在Hadoop中用来处理结构化数据，它架构在Hadoop之上，通过SQL来对数据进行操作。
Hive 查询操作过程严格遵守Hadoop MapReduce 的作业执行模型，Hive 将用户的Hive SQL 语句通过解释器转换为MapReduce 作业提交到Hadoop 集群上，Hadoop 监控作业执行过程，然后返回作业执行结果给用户。Hive 并非为联机事
转载
2023-06-14 21:50:29
129阅读
[color=red][b]字符串长度函数：length [/b][/color]
语法: length(string A)
返回值: int
说明：返回字符串A的长度
举例：
hive> select length(‘abcedfg’) from dual;
7
[color=red][b]字符串反转函数：reverse [/b][/color]
语法:
转载
2023-08-16 21:21:57
95阅读
Hive的概念： ①Hive是为了简化用户编写MapReduce程序而生成的一种框架，使用MapReduce做过数据分析的人都知道，很多分析程序除业务逻辑不同外，程序流程基本一样。在这种情况下，就需要Hive这样的用户编程接口。Hive提供了一套类SQL的查询语言，称为QL，而在创造Hive框架的过程中之所以使用SQL实现Hive是因为大家对SQL语言非常的熟悉，转换成本低，可以大大普
转载
2023-07-18 12:31:00
85阅读
1.当hive执行join内存溢出时，可以修改hive的配置文件hive-site.xml，增大内存，如下：
< property >< name >mapred.child.java.opts< /name >< value >-Xmx 1024m < /value >< /property >
2.hive默认建表时的
原创
2010-09-01 17:01:26
1073阅读
1、在命令行提示符前显示操作的数据库：hive > set hive.cli.print.current.db=true;2、查询结果显示字段名称：hive > set hive.cli.print.header=true;3、执行shell命令：hive > ! ls;4、执行dfs命令：hive > dfs -ls;5、hive脚本中，--表示注释，在命令行中不能使用6
原创
2019-12-04 11:46:26
999阅读
转载
2019-11-07 17:38:00
92阅读
2评论
# HiveQL OFFSET 实现指南
作为一名经验丰富的开发者，我很高兴帮助刚入行的小白了解如何实现 HiveQL 的 OFFSET 功能。在这篇文章中，我将详细介绍整个过程，并提供必要的代码示例。
## 流程概述
首先，我们来概述实现 HiveQL OFFSET 的整个流程。以下是步骤的简要说明：
| 步骤 | 描述 |
| ---- | ---- |
| 1 | 创建 Hiv
原创
2024-07-18 09:37:43
15阅读
背景： 在此记录下使用 sqoop将数据从mysql导出到 hive过程中需要注意的几个地方，包括 NULL值处理、增量导入、parquet格式的日期类型注：这种数据传输工具其实没必要深究所有用法，用到哪块去研究下就行了Sqoop版本：1.4.6 - CDH5.13.0一、NULL处理1. 观察测试先看执行语句： sqoop import --connect jdbc:mysql://10.3
转载
2024-05-29 05:58:18
48阅读
Hive 是基于Hadoop 构建的一套数据仓库分析系统，它提供了丰富的SQL查询方式来分析存储在Hadoop 分布式文件系统中的数据，可以将结构化的数据文件映射为一张数据库表，并提供完整的SQL查询功能，可以将SQL语句转换为MapReduce任务进行运行，通过自己的SQL 去查询分析需要的内容，这套SQL 简称Hive SQL，使不熟悉mapreduce 的用户很方便的利用SQL 语言查询，汇
转载
2018-06-14 09:56:00
106阅读
2评论
# Python与HiveQL的结合：大数据处理的利器
在当今数据驱动的时代，如何高效地处理和分析大量数据已经成为了一个重要的问题。Apache Hive是一个用于数据仓库的软件，可以方便地在Hadoop上使用SQL样式的查询语言HiveQL进行数据分析。随着Python的流行，许多数据科学家和分析师开始将Python与Hive结合使用，以便利用这两者的优势来进行大数据处理。
## 什么是Hi
原创
2024-08-13 04:42:40
22阅读
需求背景：把 小蜜蜂(qQ1)(123)AQ12a -->> 小蜜蜂目录：方式一：TRANSLATE方式二：regexp_replace 你会选择什么方法呢？我第一反应是使用 TRANSLATE 函数，因为他可以涵盖所有情况的情况。语法：translate(expr, from, to)返回一个 expr，其中 from 中的所有字符都
转载
2023-11-16 22:40:05
50阅读
1.当hive执行join内存溢出时，可以修改hive的配置文件hive-site.xml，增大内存，如下：
< property >
< name >mapred.child.java.opts< /name >
< value >-Xmx 1024m < /value >
<
转载
精选
2012-11-18 14:21:10
750阅读
HiveQL详解HiveQL是一种类似SQL的语言, 它与大部分的SQL语法兼容, 但是并不完全支持SQL标准, 如HiveQL不支持更新操作, 也不支持索引和事
转载
2022-10-10 14:23:49
219阅读
