CDH6.2.1 环境1、开启hive on spark配置：在hive配置中搜索 spark ，更改一下配置：YARN 服务上的 Spark 选择spark默认执行引擎 hive.execution.engine ：spark执行程序初始数 spark.dynamicAllocation.initialExecutors ：2 ，启动sparksession时，默认初始启动的executor个数
GROUPING SETS GROUPING SETS作为GROUP BY的子句，允许开发人员在GROUP BY语句后面指定多个统计选项，可以简单理解为多条group by语句通过union all把查询结果聚合起来结合起来，下面是几个实例可以帮助我们了解， 以acorn_3g.test_xinyan_reg为例： [dp@YZSJHL19-87 xjob]$ hive -e <span c
if函数是我们平时使用excel软件经常会用到的函数之一，下面就跟小编一起来学习下if函数的使用方法吧。IF函数:根据条件满足与否返回不同的值IF(logica_test,value_if_true,value_if_false)参数1：条件判断参数2：条件满足时返回值参数3：条件不满足时假返回值If函数的使用中主要为了两种用法。1、条件判断。条件判断主要分为结果仅两种的单一条件判断和多种结果的多
转载
2023-09-24 09:12:37
317阅读
HIVE函数大全及用例 函数目录HIVE函数大全及用例**关系运算****1、等值比较: =****2、不等值比较: <>****3、小于比较: <****4、小于等于比较: <=****5、大于比较: >****6、大于等于比较: >=****7、空值判断: IS NULL****8、非空判断: IS NOT NULL****9、LIKE比较: LIKE***
文章目录一、RegExp(正则表达式)正则的创建正则对象的属性和方法匹配模式patternstring对象的正则方法常用正则表达式 一、RegExp(正则表达式)正则表达式（RegExp）是Regular Expression缩写，是用于查找符合某些规则的字符串的工具。 正则表达式是一个描述字符模式的对象，当检索某个文本时，可以使用一种模式来描述要检索的内容，RegExp 就是这种模式。正则的创
一 Hive 使用方式1.1.Hive shell直接在hive的安装目录下，然后输入hql语句就可以了bin/hive1.2.通过Hive thrift服务启动，启动后可以远程连接启动为前台：
bin/hiveserver2
启动为后台：(1代表标准输出，2代表错误输出，标准输出和错误输出分别重定向到不同的日志文件)
nohup bin/hiveserver2 1>/var/log/hiv
转载
2023-10-08 06:45:17
182阅读
通过上一小节对Hive-Cli的一些操作，可以掌握基本的Hive的语法了，本小节需要讲解一下Beeline客户端的一些操作，其实Beeline的语法和Hive客户端的基本一致，但是Hive自身的客户端只能自己用，别人连不上去，要想多个用户访问，必须使用HiveServer2。话不多说，直接进入Beeline-Cli输入一些语句来看一下结果，$beeline>
$beeline>!hel
转载
2023-07-07 11:20:57
239阅读
## Hive侧视图使用方法
Hive 是一款建立在 Hadoop 之上的数据仓库工具，可以方便地对大规模数据进行管理和分析。在 Hive 中，我们可以通过创建视图来简化复杂的查询操作。除了普通的视图之外，Hive 还支持侧视图（Materialized Views），它可以将视图的结果缓存起来，提高查询性能。
### 什么是Hive侧视图？
Hive 侧视图是一种特殊类型的视图，它会将视图
## 使用Decimal在Hive中进行精确计算
在Hive中，我们经常会遇到需要进行精确计算的场景，比如金融数据、科学计算等。而在这些场景下，使用浮点数进行计算可能会出现精度丢失的问题。为了解决这个问题，Hive提供了Decimal类型来进行精确计算。
### 什么是Decimal类型
Decimal是一种精确数值类型，它可以表示固定长度的十进制数。在Hive中，我们可以使用Decimal
文章目录前言一、Hive安装包下载二、Hive的安装三、mysql驱动配置四、Hive配置文件修改1.修改hive-env.sh2.修改默认日志存放路径3.使用mysql数据库为默认元数据库五、启动Hive1.在HDFS上创建目录2.启动hive 前言提示：在开始之前请先确保你已经进行了Hadoop环境搭建，详情请见CDH5.3.6下搭建hadoop伪分布式环境教程！一、Hive安装包下载进入c
转载
2023-07-04 11:08:51
177阅读
记录一下Hive的安装和常用的三种交互方式的使用，参考文末博文和老王，需要提前安装好MySQL和配置好Hadoop集群。使用版本：（1）MySQL：5.7.28（2）Hadoop：2.6.0-cdh5.14.2（3）Hive：1.1.0-cdh5.14.2Hive的安装Hive的安装，需要完成MySQL的安装、Hadoop的配置、Hive中conf文件的配置、Hive中日志路径的配置。MySQL的
转载
2023-07-31 18:02:49
92阅读
在 Excel 中，Rank函数用于实现一个数字在指定数字列表中的排位，并且可以通过拖动的办法实现对整个数字列表的自动排序。Rank函数共有三个参数，前两个为必选项，后一个为可选项；如果省略可选项，将默认按降序排序。Rank函数怎么用呢？文章先介绍Rank函数的语法，再用四个由浅入深的具体实例分享Rank函数的使用方法；四个实例分别为无重复数字的自动排序、重复数字并排的自动排序、重复数字顺排的自动
一、简介hive是基于hadoop的一种数据仓库工具，可以将结构化的文件映射成为数据库的一张表，并提供简单sql查询功能，底层实现是转化为MapReduce任务计算。二、安装（1）下载从cdh下载页下载http://archive.cloudera.com/cdh5/cdh/5/hive-1.1.0-cdh5.11.1.tar.gz下载好后上传至服务器的/home/hadoop/software，
转载
2023-07-08 15:58:15
104阅读
关于CDH和Cloudera ManagerCDH (Cloudera's Distribution, including Apache Hadoop)，是Hadoop众多分支中的一种，由Cloudera维护，基于稳定版本的Apache Hadoop构建，并集成了很多补丁，可直接用于生产环境。Cloudera Manager则是为了便于在集群中进行Hadoop等大数据处理相关的服务安装和监控管理的
转载
2023-08-03 14:48:42
259阅读
重点内容：Hive的数据类型Hive的Tables(External 和 Internal)Hive的Partitions（Static和Dynamic）选择掌握 Hive Bucket Tables 期间我要穿插一些练习，因为上课时做的练习完全不够。1. 两种连接Hive的工具（1）通过beeline（2）通过command Line命令行使用方法如下图解释：-e 表示执行
转载
2023-10-07 09:46:57
868阅读
keil软件是学习单片使用到的软件，用C语言写程序，keil是必不可少的，目前最新的keil软件算是keil4了，不过还是有不少的实例程序是用keil2编写的，但是不会影响keil4打开以.UV2为后缀的工程文件，keil4会将keil2转换成keil4。 安装好之后可以看下注册机的说明，注册keil软件
三、使用方法 如果你的开发环境是 vc6.0，那么我们使用第九回中的Simple6组件为例，快去下载呀...... 如果你的开发环境是 vc.net 2003，那么用第十回中的Simple8组件为例，快去下载呀...... 嘿嘿，其实不下载也没有关系，因为你只要下载本回的示例程序，里面已经包含了所需的组件。但使用前不要忘了去注册呀：regsvr32.exe simpl
转载
2023-06-27 16:19:21
522阅读
1.背景Hive是建立在Hadoop之上的数据仓库基础构架、是为了减少MapReduce编写工作的批处理系统，Hive本身不存储和计算数据，它完全依赖于HDFS和MapReduce。Hive可以理解为一个客户端工具，将我们的sql操作转换为相应的MapReduce jobs，然后在Hadoop上面运行。 HBase全称为Hadoop Database，即HBase是Hadoop的数据库，是一个分布
转载
2023-08-28 13:32:08
105阅读
Hive JDBC连接hive（2.1.1）（java）
转载
2023-05-21 15:06:58
148阅读
Hive体系结构Hive有2个服务端守护进程：Hiveserver2：支撑JDBC访问，Thrift服务。MetaStore Server：支撑访问元数据库的服务。Hive内核结构Complier：编译器，编译hql语法。Optimizer：优化hql代码，产生最优执行计划。通过explain select …查看执行计划。Executor：执行最终转化的类(MRjob)。Hive用户接口用户接口
转载
2023-07-04 09:46:29
141阅读
