一、Hive基本概念1.1 hive是什么hive是基于hadoop的一个数仓分析工具，hive可以将hdfs上存储的结构化的数据，映射成一张表，然后让用户写HQL(类SQL)来分析数据tel up down
1383838438 1345 1567
1383838439 5345 156
Hive 已是目前业界最为通用、廉价的构建大数据时代数据仓库的解决方案了，虽然也有 Impala 等后起之秀，但目前从功能、稳定性等方面来说，Hive 的地位尚不可撼动。其实这篇博文主要是想聊聊 SMB join 的，Join 是整个 MR/Hive 最为核心的部分之一，是每个 Hadoop/Hive/DW RD 必须掌握的部分，之前也有几篇文章聊到过 MR/Hive 中的 join，其实底层都是
转载
2023-08-01 18:28:03
68阅读
数据仓库建设中的数据抽取环节，常常需要增量抽取业务库数据。但业务库数据不是一层不变的，会根据时间发生状态变更，那么就需要同步更新变化数据到HIVE中。过去在Oracle上做数据仓库时，可以使用merge的方法合并新老数据。但hive中没有该功能，本文旨在通过sqoop抽取后，自动实现数据合并。
转载
2020-04-07 18:00:00
117阅读
# Hive Merge: 将数据的合并处理与分析简化
转载
2024-07-10 15:07:38
42阅读
1.hive的介绍Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供类SQL查询功能（HQL）。其本质是将SQL转换为MapReduce的任务进行运算，底层由HDFS来提供数据的存储，hive可以理解为一个将SQL转换为MapReduce的任务的工具。 2.hive的特点可扩展  
转载
2023-09-01 08:25:08
48阅读
# 实现Hive Sort Merge Join
## 概述
在Hive中，Sort Merge Join是一种用于合并连接两个大型数据集的高效方法。它使用Hive的MapReduce框架，通过对数据进行排序和合并操作来实现连接操作。本文将介绍Hive Sort Merge Join的原理和实现步骤，并提供相应代码示例。
## Sort Merge Join的原理
Sort Merge Joi
原创
2023-11-03 05:04:09
202阅读
