一、Hive 概述及体系架构1.Hive 是什么 (1).由Facebook开源,最初用于解决海量结构化的日志数据统计问题 (2).是一个构建在Hadoop之上的数据仓库 (3).Hive定义了一种类似于SQL查询语言:HQL(非常类似于MySQL中的SQL语句,同时做了扩展) (4).通常用于离线数据处理(采用MapReduce) (5).可以认为是一个HQL=>MapReduce的语言翻
转载 2023-07-12 09:34:55
133阅读
Kattis - honey【DP】题意 有一只蜜蜂,在它的蜂房当中,蜂房是正六边形的,然后它要出去,但是它只能走N步,第N步的时候要回到起点,给出N, 求方案总数思路 用DP 因为N == 14所以 最多走7步 我们不妨设 (7, 7) 为原点,然后 dp[0][...
转载 2018-03-03 22:30:00
69阅读
2评论
转载 2013-05-23 20:39:00
42阅读
2评论
https://www.fgba.net/sitemap.xml
转载 2021-11-13 09:45:03
3955阅读
【Docker项目实战】使用Docker部署Honey个人轻量级仪表盘
原创 5月前
45阅读
Honeyview是一种非常快速的图像查看器,支持各种格式。它还支持查看压缩的ZIP,RAR或7z文件中的图像而无需提取。如果图像具有GPS信息,则可以在Google地图上查看该位置,并且用户可以存储首选照片。特征:支持各种图像格式-BMP,JPG,GIF /动画GIF,TIFF,PNG,TGA,PSD,JPEG 2000(JP2,J2K),JPEG XR / HD照片(JXR,WDP,HDP),
查询语句语法:[WITH CommonTableExpression (, CommonTableExpression)*] (Note: Only available starting with Hive0.13.0)SELECT [ALL | DISTINCT] select_expr, select_expr, ...FROM table_reference[W...
原创 2022-05-16 09:29:14
2540阅读
Hive架构: Hive基础 Hive基础 1 概念 1 概念 1.1 简介 1.1 简介 1.1.1 hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张数据库表, 并提供简单的sql查询功能,可以将sql语句转换为MapReduce任务进行运行。--OLAP 1.1.1
原创 2021-07-26 17:34:37
1774阅读
1、Hive安装地址 1.Hive官网地址 http://hive.apache.org/ 2.文档查看地址 https://cwiki.apache.org/confluence/display/Hive/GettingStarted 3.github地址 https://github.com/apache/hive2、Hive安装...
原创 2022-05-16 09:30:21
299阅读
文章目录一、环境准备二、Hive 查询1、普通查询2、别名查询3、限定查询4、多表ype) 5 个字段,字符类型为..
原创 2022-08-12 10:39:51
572阅读
# 升级 Hive Hive 是一个基于 Hadoop 的数据仓库工具,它提供了类似于 SQL 的查询语言 HiveQL,允许用户使用类似于 SQL 的语法来分析和处理大规模的数据。 随着技术的发展,Hive 也在不断演进,推出了新版本以提供更好的性能和功能。在本文中,我们将讨论如何升级 Hive,以及一些常用的升级技巧和注意事项。 ## 1. 升级前的准备工作 在升级 Hive 之前,我
原创 2023-08-19 05:16:32
317阅读
# Hive同步Hive:数据仓库之旅 在大数据时代,Hive作为一个在Hadoop生态系统中的数据仓库工具,帮助我们对海量数据进行分析与管理。随着数据应用的不断扩展,数据同步成为了一个重要的课题。本文将介绍Hive同步Hive的过程,并提供代码示例。 ## 什么是Hive同步HiveHive同步Hive是指将一个Hive表中的数据同步到另一个Hive表中。这个过程可能会涉及到多个数据源
原创 8月前
93阅读
注:技术交流可以加我VX:k-loop,昵称:默读者。1,创建用户表   create table tmp_user( uid string comment'用户ID', name string comment'用户名' )comment'用户表' ; 插入测试数据   insert into tmp_user(uid,name) values('A','理
转载 2024-03-11 06:22:54
63阅读
公用表表达式(CTE)是从WITH子句中指定的简单查询派生的临时结果集(会把查询的表数据放到内存中,供其他查询随时使用),该子句紧跟在SELECT或INSERT关键字之前。CTE仅在单个语句的执行范围内定义。可以在Hive SELECT,INSERT,CREATE TABLE AS SELECT 或 CREATE VIEW AS SELECT 语句中使用一个或多个CTE 。  
转载 2023-05-27 15:07:25
274阅读
Hive uses log4j for logging. By default logs are not emitted to the console by the CLI. The default logging level is WARN for Hive releases prior to 0
原创 2021-08-07 18:34:07
4940阅读
hive的调优优化的主要考虑方面:环境方面:服务器的配置、容器的配置、环境搭建具体软件配置参数:代码级别的优化优的主要原则: 20/80原则非常重要,简单的说80%的程序时间执行时间花费在20%的代码上,所以重点就先要 找到这关键的20%代码做重点优化.1.explain 和 explain extendedexplain : 只有对hql语句的解释。explain extended:对hql语句
转载 2023-11-03 10:34:46
141阅读
Hive架构1)用户接口:命令行工具;启动方式:hive 或者 hive --service cli通过Thrift对外提供服务,默认端口是10000;启动方式:hive --service hiveserver   WEBUI(浏览器访问hive):通过浏览器访问hive,默认端口是9999;启动方式:hive --service hwi 2)元数据存储(Metastore)
转载 2023-09-02 16:12:37
242阅读
写一些样版代码,便于查询使用一.创建表1.建表语法CREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name [(col_name data_type [COMMENT col_comment], ...)] [COMMENT table_comment] [PARTITIONED BY (col_name data_type [COMMENT co
转载 2023-11-07 13:49:55
65阅读
什么是HiveHive是建立在Hadoop上的,用来构建数据仓库的工具,里面有表的概念,可以使用SQL语句实现存储、查询和分析存储在 HDFS上的数据,这些SQL语句在Hive中称为HQL,语法和SQL语句基本一样。 由于数据是杂乱无章的,所以Hive需要一份关于这些数据的元数据来管理和操作这些数据。这份元数据包括:元数据( 行的分隔符(在映射成表的时候知道在哪里分行显示) 字段分隔符(在映射成
转载 2023-09-06 09:22:34
115阅读
由于Hive的执行依赖于底层的MapReduce作业,因此对Hadoop作业的优化或者对MapRedu
原创 2022-11-03 14:43:54
249阅读
  • 1
  • 2
  • 3
  • 4
  • 5