1、什么是Hive？Hive：由Facebook开源用于解决海量结构化日志的数据统计(海量的结构化数据的运算分析)。Hive是基于Hadoop的一个数据仓库工具(服务性的软件)，可以将结构化的数据文件映射为一张表，并提供类似于SQL查询。本质是：将Hive SQL转化成MapReduce程序 或者 spark程序 1）Hive处理的数据存储在HDFS2）Hive分析数据底层的实现是Map
转载
2023-07-14 12:01:23
149阅读
文章目录一、Apache Hive概述1.1、什么是Hive1.2、使用Hive原因1.3、Hive和Hadoop关系二、Hive功能思想2.1、映射信息记录2.2、SQL语法解析、编译三、Hive架构、组件3.1、Hive架构图3.2Hive组件四、Hive常用操作4.1、数据类型4.1.1、基本数据类型4.1.2、集合数据类型4.2、数据库4.3、数据表4.3.1、创建表语法4.3.2、ex
转载
2023-08-21 09:46:43
72阅读
Hive简介和安装一、Hive简介二、HQL和SQL的不同三、Hive的安装四、Hive的交互模式五、设置dbeaver六、启动beeline指令及hive命令行模式 一、Hive简介Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供完整的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。其优点是学习成本低，可以通过类SQL语句快速
转载
2023-06-14 21:31:49
62阅读
一、Hive的介绍1. Hive是一个数据仓库软件 Hive可以使用SQL来促进对已经存在在分布式设备中的数据进行读，写和管理等操作！ Hive在使用时，需要对已经存储的数据进行结构的投影(映射) Hive提供了一个命令行和JDBC的方式，让用户可以连接到hive！ 注意：Hive只能分析结构化的数据！ Hive在Hadoop之上，使用hive的前提是先要安装Hadoop2. Hi
转载
2023-07-13 00:08:53
64阅读
1. 絮絮叨叨从工作开始，同事就说你要领一个mac，这样方便你的开发工作毕竟习惯了操作Linux服务器，在mac上使用常见的Linux命令，毫无障碍哪里像windows，使用shell命令都要先上网查一下最近不信邪，想在windows上、基于IDEA搭建Presto的开发环境编译、导入IDEA都还很顺利，等到运行时，就傻眼了2. 准备工作2.1 JDK安装JDK，要求1.8及以上，自己选择的是1.
转载
2024-11-01 08:47:19
65阅读
Hive数据仓库分层按照数据流入流出的过程，数据仓库架构可分为三层——源数据（ODS）、数据仓库（DW）、数据应用（APP）Hive介绍Hive是基于hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供类似SQL的查询功能Hive可以存储很大量的数据集，可以直接访问存储在Apache Hdfs或者其他数据库存储系统中的文件Hive支持Mapreduce、Spark、Te
转载
2023-07-17 20:34:27
154阅读
目录项目概要具体实现HIVE查询项目概要需求手机应用日志定期离线分析手机应用新增用户、活跃用户、沉默用户、启动次数、版本分布和留存用户等业务指标。工作流程手机APP启动时，上报启动日志、错误日志、页面日志、事件日志、使用时长日志等信息到日志收集服务器。日志收集服务器将收集到的日志信息发送给kafka。Flume分别消费kafka中的5种主题信息，并把数据存储到HDFS上。通过crontab任务调度
转载
2024-06-07 15:21:59
59阅读
1.简介The Apache Hive ™ data warehouse software facilitates reading, writing, and managing large datasets residing in distributed storage using SQL. Structure can be projected onto data already in stora
转载
2023-09-01 16:28:39
143阅读
HiveHive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能。 本质是：将HQL转化成MapReduce程序 1）Hive处理的数据存储在HDFS 2）Hive分析数据底层的实现是MapReduce 3）执行程序运行在Yarn上1. Hive安装1.1 Hive安装地址Hive官网地址 https://hive.apache.org/文档查看地址
转载
2024-01-07 22:25:03
156阅读
本节内容什么是hivehive的基本执行原理hive安装启动hive连接方式1 什么是hive简介 hive是基于Hadoop的一个数据仓库工具,并不是一个数据库，用来进行数据提取、转化、加载，这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。hive数据仓库工具能将结构化的数据文件映射为一张数据库表，并提供SQL查询功能，能将SQL语句转变成MapRe
转载
2024-02-20 16:36:39
28阅读
文章目录1.1 Hive 的起源1.2 数据仓库工具 Hive1.3 Hive 数据管理1.4 Hive的内外表1.4.2 查询表1.4.2 创建内部表1.4.3 创建外部表1.5 Hive 小实操1.5.1 创表并插入1.5.2 实现行转列1.6 Hive 安装模式 1.1 Hive 的起源Hive起源于Facebook（一个美国的社交服务网络）。Facebook有着大量的数据，而Hadoop
转载
2023-09-08 15:07:25
47阅读
多喝热水问题背景这篇讲一下最近的一个工作场景，需要统计用户登录时长，两个指标：每日平均单次登录时长、每日平均用户登录时长。 有的数据字段长下面这样子(这边不考虑根据不同app版本分类啊之类的 实际也做不了因为大部分是空的orz 有把一些干扰字段也列出来了)：字段名解释id事件记录iduserid用户idip设备iptriggertime事件触发时间戳tiggertimestr事件触发时间(yyyy
转载
2024-03-04 01:21:33
45阅读
BigData之Hive：Hive(一个基于Hadoop的数据仓库工具)的简介(包括HiveSQL)、下载、案例应用之详细攻略目录Hive(一个基于Hadoop的数据仓库工具)的简介1、HiveSQL 2、Hive的适用场景——不适合那些需要高实性的应用(不能够在大规模数据集上实现低延迟快速的查询)、不适合用联机(online)事务
转载
2024-02-23 11:43:11
24阅读
DolphinScheduler 使用常见问题总结说明使用注意事项安装包与安装目录日志查看目录开发环境常见问题API启动端口是8080不是12345找不到mysql驱动worker 执行失败报NPE空指针调度部署常见问题ubuntu 部署报错 source: not found访问API服务报错404调度使用常见问题系统初始化登录失败监控页面Master Worker 页面一直都在努力加载中或者
转载
2023-07-18 16:41:44
0阅读
1. 需求
app的加载时长，分别位于0.25 、0.5、0.75、0.95用户的加载时长
2. 建表语句
create table if not exists udw.temp_load_time(
user_id string,
project_name string,
load_time int
)
partitioned by (dt string)
row for
原创
2021-07-14 11:49:14
515阅读
点击软件更新按钮后弹出新版本更新通知及更新渠道效果图： 准备工作：1:讯飞语记APP（各大应用商店都有）2：Fusion APP3：功能实现代码：来至-Fusion APP官方群群员阿俊综合整合了官方群里多位大佬教程而成4：蓝奏云网盘账号（用于上传apk文件）ps:蓝奏云也有app了，方便上传，自行前往蓝奏云官网下载。按钮前端代码：点我下载讯飞语记后端代码：点我下载步骤开始：蓝奏云部分：
转载
2023-11-14 06:20:21
198阅读
查询语句语法：[WITH CommonTableExpression (, CommonTableExpression)*] (Note: Only available starting with Hive0.13.0)SELECT [ALL | DISTINCT] select_expr, select_expr, ...FROM table_reference[W...
原创
2022-05-16 09:29:14
2549阅读
Hive架构： Hive基础 Hive基础 1 概念 1 概念 1.1 简介 1.1 简介 1.1.1 hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表， 并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。--OLAP 1.1.1
原创
2021-07-26 17:34:37
1774阅读
1、Hive安装地址 1．Hive官网地址 http://hive.apache.org/ 2．文档查看地址 https://cwiki.apache.org/confluence/display/Hive/GettingStarted 3．github地址 https://github.com/apache/hive2、Hive安装...
原创
2022-05-16 09:30:21
299阅读
文章目录一、环境准备二、Hive 查询1、普通查询2、别名查询3、限定查询4、多表ype) 5 个字段，字符类型为..
原创
2022-08-12 10:39:51
572阅读
