下图是 hive 系统的整体结构图
Hive 体系结构 上图显示了 Hive 的主要组件以及 Hive 跟 Hadoop 的交互过程，这些组件分别是： UI：用户提交查询和其他操作到系统的用户接口。 Driver：接收查询的组件，负责 session 管理，提供基于 JDBC/ODBC 接口的执行和数据拉取 API。 Compiler：解析查询，对查询的不同部分做语法分析，生
转载
2023-10-01 15:58:05
149阅读
文章目录1. 什么是数仓1.1. 基本概念1.2. 主要特征1.2.1. 面向主题1.2.2. 集成性1.2.3. 非易失性（不可更新性）1.2.4. 时变性1.3. 数据库与数据仓库的区别1.4. 数仓的分层架构1.5. 数仓的元数据管理2. Hive 的基本概念2.1. Hive 简介2.1.1 什么是 Hive2.1.2 为什么使用 Hive2.1.3 Hive 的特点2.2. Hive
转载
2024-07-28 11:15:16
22阅读
什么是架构风格呢？根据应用架构指南所说，架构风格指：一组原则。你可以把它看成是一组为系统家族提供抽象框架的粗粒度模式。架构风格能改进分块，还能为频繁出现的问题提供解决方案，以此促进设计重用。架构风格描述客户端 - 服务器将系统分为两个应用，其中客户端向服务器发送服务请求。基于组件的架构把应用设计分解为可重用的功能、逻辑组件，这些组件的位置相互透明，只暴露明确定义的通信接口。分层架构把应用的关注点分
转载
2023-08-15 13:29:37
103阅读
1） hive 简介Hive：由Facebook 开源用于解决海量结构化日志的数据统计工具。Hive 是基于Hadoop 的一个数据仓库工具，可以将结构化的数据文件映射为一张表，
原创
2022-02-13 14:02:09
101阅读
1） hive 简介Hive：由Facebook 开源用于解决海量结构化日志的数据统计工具。Hive 是基于Hadoop 的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL 查询功能。2） Hive 本质将HQL 转化成MapReduce 程序：（1）Hive 处理的数据存储在HDFS（2）Hive 分析数据底层的实现是MapReduce（3）执行程序运行在Yarn 上...
原创
2021-08-10 10:21:52
171阅读
架构师一时是技术的大拿，一时是技术的规划者，一时是技术团队的指挥者。
原创
2022-11-02 00:26:12
187阅读
总序概要1 介绍2 实践场景 2.1 视图集的场景 2.2 架构执行场景 2.3 质量属性演变场景（非功能属性演变场景） 2.4 通用和易变架构场景 2.5 二进制组件场景 2.6 &nb
转载
2024-01-02 10:03:11
38阅读
对hive的简介和理解在公司，基本上大部分的查询都是在hive上进行的。基于自己天天和hive打交道，有感而发，所以有了想写这篇文章的意愿。 如果用一句话来解释hive是什么和能做什么，那就是：hive是基于Hadoop的一个数据仓库。因此，要理解hive，就要先去了解Hadoop和它相关的MapReduce，以及数据仓库。对于Hadoop和MapReduce，读者可以先去网上查一下。对于数据仓库
转载
2023-07-13 15:37:36
50阅读
根据要解决的问题，对目标系统的边界进行界定。
并对目标系统按某个原则的进行切分。切分的原则，要便于不同的角色，对切分出来的部分，并行或串行开展工作，一般并行才能减少时间。
并对这些切分出来的部分，设立沟通机制。
根据 3，使得这些部分之间能够进行有机的联系，合并组装成为一个整体，完成目标系统的所有工作。
转载
2021-08-03 14:56:13
288阅读
什么是软件系统的架构（Architecture）？一般而言，架构有两个要素： ·它是一个软件系统从整体到部分的最高层次的划分。 一个系统通常是由元件组成的，而这些元件如何形成、相互之间如何发生作用，则是关于这个系统本身结构的重要信息。 详细地说，就是要包括架构元件（Architecture Component）、联结器（Connector）、任务流（Task-flow）。所谓架构元素，也就是
转载
2007-04-26 14:36:53
3007阅读
# 什么是Hive和ClickHouse
在大数据时代，数据的存储与分析变得尤为重要。Hive和ClickHouse是两种常用于数据处理与分析的技术，各有所长，它们在设计理念、适用场景和性能上都有明显的区别。
## 什么是Hive？
Apache Hive是一个数据仓库基础设施，它建立在Hadoop之上，主要用于处理和分析大规模数据集。Hive提供了一种类似SQL的查询语言（HiveQL），
原创
2024-09-11 06:18:36
36阅读
分散关注、松散耦合
逻辑复用、标准定义
——把变化的部分和不变化的部分隔离开。使得变化的部分发生变化时，不变部分不受影响。
原创
2011-09-24 13:56:20
418阅读
关于架构的定义，业界有太多不同的说法，但大同小异，本质趋同，只不过侧重各有不同，这里选取IEEE（电气和电子工程师协会）的定义：架构描述了一个系统的基本组织结构，包含了组成系统的组件、组件之间的关系、组件与环境之间的关系，以及指导上述内容进行设计和演化的原则。系统组织起来完成一系列功能的组件集组件组件是一个系统模块化的一部分，是一系列功能集的封装体环境环境或上下文，指的是会对这个系统的开发、运行等
原创
2018-12-27 23:59:10
543阅读
CPU这个词对于每个人来说并不陌生，但是你真的了解它的内部结构吗，它的运作机制是什么？CPU（Central Processing Unit，中央处理器）是计算机系统中的核心组件，它负责执行所有指令并控制计算机系统的操作。为了更好理解CPU，我们先来解释一下程序运行的一般流程，可以说了解程序的运行流程是掌握程序运行机制的基础和前提。程序运行的流程示例在这一流程中，CPU所负责的就是解释和运行最终转
转载
2023-09-13 12:33:25
92阅读
微服务架构用于设计和构建复杂的应用程序，这些应用程序可以分为更小的、松散耦合的服务。它具有多种优点，通常用于以下目的：可扩展性：微服务允许单个服务根据其特定需求独立扩展。这种可扩展性可实现高效的资源利用，并能够通过仅扩展必要的服务来处理高流量负载。敏捷性和灵活性：微服务使组织能够更快地迭代和部署软件。服务可以独立开发、部署和更新，从而减少依赖性并使团队能够并行工作。它还允许技术多样性，因为每个服务
文章目录介绍Hive ArchitechtureHive ClientHive ServiceProcessing Framework and Resource ManagementDistributed StorageHive的运行流程参考网址 介绍Hive是开源的数据仓库工具，用于执行分布式处理和数据分析的。由Facebook开发来解决替代JAVA MR程序的。 Hive使用HQL(Hive
转载
2024-04-02 13:40:59
46阅读
# 如何实现“hive是job是根据什么生成的”
作为一名经验丰富的开发者，我将帮助你理解“hive是job是根据什么生成的”的过程和步骤。首先，让我们来看整个流程的步骤：
| 步骤 | 操作 |
|------|------------------------|
| 1 | 编写HiveQL查询语句 |
| 2 | 提交Hive Job
原创
2024-05-07 06:25:47
29阅读
