我们通过hive shell去操作hive，本文我们以Java代码的示例去对hive执行加载数据和查询数据来演示JavaAPI如何通过JDBC来操作hive的一、依赖 由于hive的服务端基于1.2.2版本，所以这里采用jdbc1.2.2，否则你可能报一些奇怪的错误（下载依赖需要一点时间）<dependency>
<groupId>
转载
2023-07-05 15:39:16
96阅读
在之前的学习和实践Hive中，使用的都是CLI或者hive –e的方式，该方式仅允许使用HiveQL执行查询、更新等操作，并且该方式比较笨拙单一。幸好Hive提供了轻客户端的实现，通过HiveServer或者HiveServer2，客户端可以在不启动CLI的情况下对Hive中的数据进行操作，两者都允许远程客户端使用多种编程语言如Java、Python向Hive提交请求，取回结果。HiveServe
转载
2024-01-27 16:27:21
237阅读
一、java操作hive1、启动服务:hiveserver2，让hive开启与外部连接的服务nohup hiveserver2 1>/dev/null 2>/dev/null &2、加入hive的依赖包 <dependency>
<groupId>org.apache.hive</groupId>
转载
2023-06-27 07:44:32
249阅读
Hive提供了jdbc驱动，使得我们可以用java代码来连接Hive并进行一些类关系型数据库的sql语句查询等操作。首先，我们必须将Hive的服务，也就是HiveServe打开。在Hive 0.11.0版本前，只有HiveServer服务可用，但是HiveServer本身存在很多问题（比如：安全性、并发性等）；针对这些问题，Hive-0.11.0版本后提供了一
转载
2023-07-21 16:51:49
64阅读
一、Fetch抓取Fetch抓取是指，Hive中对某些情况的查询可以不必使用MapReduce计算。例如：SELECT * FROM EMP;在这种情况下，Hive可以简单地读取EMP对应的存储目录下的文件，然后输出查询结果到控制台。在hive-default.xml.template文件中hive.fetch.task.conversion默认是more，老版本Hive默认是minimal，该属
转载
2024-09-21 14:34:29
25阅读
jdbc远程连接hiveserver22016-04-26 15:59 本站整理 浏览(425) 在之前的学习和实践Hive中，使用的都是CLI或者hive –e的方式，该方式仅允许使用HiveQL执行查询、更新等操作，并且该方式比较笨拙单一。幸好Hive提供了轻客户端的实现，通过HiveServer或者HiveServer2，客户端可以在不启动CLI的情
转载
2023-12-25 12:53:27
124阅读
# 使用Java API创建Hive表
## 引言
作为一名经验丰富的开发者，要教会一位刚入行的小白如何使用Java API创建Hive表，我们需要先了解整个流程，并提供每个步骤所需的代码和解释。
## 流程
下表展示了使用Java API创建Hive表的整个流程：
| 步骤 | 描述 |
| --- | --- |
| 步骤1 | 创建Hive表的连接 |
| 步骤2 | 创建Hive表
原创
2023-12-01 13:41:56
150阅读
Hive的Java API1、基于JDBC的方式（推荐）(*) 使用的驱动private static String driver = "org.apache.hive.jdbc.HiveDriver";(*) 启动HIve的serverhiveserver2 & ----> 表示后台启动(*) 错误Caused by: java.lang.RuntimeException: org
转载
2023-07-27 20:43:36
104阅读
# 如何实现 Hive OrcDump API
在大数据处理的过程中，会有各种各样的数据格式需要处理。使用 Hive 管理数据是其中之一，而 Orc 数据存储格式则是常用的列式存储格式。当我们需要从 Hive 中导出 ORC 格式的数据时，`orcdump` API 提供了方便的方法。本文将指导你如何实现 Hive 的 OrcDump API，适合刚入行的小白进行参考和学习。
## 流程概述
原创
2024-08-24 03:41:05
29阅读
下面的代码将三行数据：张三,20李四,22王五,30
转载
2022-06-18 00:50:34
581阅读
Orc是Hive特有的一种列式存储的文件格式，它有着非常高的压缩比和读取效率，因此很快取代了之前的RCFile，成为Hive中非常常用的一种文件格式。在实际业务场景中，可能需要使用Java API，或者MapReduce读写Orc文件。本文先介绍使用Java API读取Hive Orc文件。在Hive中已有一张Orc格式存储的表lxw1234:该表有四个字段：url
转载
2022-06-17 09:25:09
1011阅读
# 如何用 Java 调用 Hive 建表的实现
在大数据处理的环境中，Hive 是一个非常重要的框架，它允许用户使用类似 SQL 的语言对大数据进行查询。通过 Java API 调用 Hive，您可以动态地创建表、插入数据以及管理元数据。本文，将带领您逐步学习如何用 Java API 调用 Hive 创建数据库表。
## 整体流程
在开始之前，我们先来了解一下整个流程，以下是一份简洁的步骤
1.hive的简介：
hive不是分布式，只是hadoop的一个客户端工具，是大数据行业中数据仓库建设的工具之一。
hive是基于hadoop的。hive是以表的形式存在，存储是放在hdfs上，计算用的是MapReduce，调度用的是yarn,查询语言用的是hive-sql.
sql解析器：试用mysql的驱动。
在查询的时候，将sql语言解析成mapreduce任务进行执行。
hive
转载
2023-07-12 22:31:29
35阅读
提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录前言一、HIVE是什么？二、Hive的安装配置1.版本配置2.hive搭建配置2.1配置hive的环境变量2.2配置hive的配置文件2.3配置hadoop影响hive部分的环境变量3.Hive Shell简单操作4.Hive Api操作4.1启动hiveserver2服务4.2 hive实战使用总结 前言提示：这里可以添加
转载
2023-08-13 14:20:52
227阅读
不要问我为什么，因为爱，哈哈哈哈。。。进入正题，最近做项目顺带学习了下hive metastore的源码，进行下知识总结。 hive metastore的整体架构如图： 一、组成结构： 如图我们可以看到，hive metastore的组成结构分为 客户端 服务端 ，那么下来我们逐一进行分析： 1、客户端 从代码的角度来看：尼玛太多了。。我们从入口HIVE开始看，可
转载
2023-07-12 09:28:34
317阅读
从Hive llap特性的出现，分析作用、部署、使用细节问题，总结hive llap使用经验和注意事项。
(From the appearance of the Hive llap feature, analyze the function, deployment, and use details, and summarize the experience an
转载
2023-07-05 15:38:58
171阅读
文章目录一. 表的基本操作1. 新建数据库2. 删除数据库3. 显示数据库4. 指定使用数据库5. 创建内部表6. 创建外部表7. 导入数据 load 命令8. 创建分区表 partitioned by ()二. 表的查询和连接0. 准备工作 （准备数据，建表，导入数据）准备数据建表 + 导入数据表当前数据1. 查询 select2. join关联查询内连接 t_a join t_b on co
转载
2023-08-29 18:30:12
44阅读
导读：快手基于Hive构建数据仓库，并把Hive的元数据信息存储在MySql中，随着业务发展和数据增长，一方面对于计算引擎提出了更高的要求，同时也给Hive元数据库的服务稳定性带来了巨大的挑战。本文将主要介绍Hive MetaStore服务在快手的挑战与优化，包括：快手SQL on Hadoop智能引擎架构Hive MetaStore在快手的挑战Hive MetaStore在快手的优化快手SQL
转载
2024-03-12 12:43:52
61阅读
本文依赖hive环境可用，特别是HiveServer2。本文仅仅介绍通过java api访问hive的数据。
原创
2023-06-10 05:32:03
111阅读
点赞
Hive的复杂类型array类型-- 1、准备数据
zhangsan beijing,shanghai,tianjin,hangzhou
wangwu changchun,chengdu,wuhan,beijing
-- 2、创建表
create external table hive_array
(
name string,
work_locatio
转载
2024-09-28 23:23:01
63阅读
