读hive编程指南《Programming Hive》中文版随手记录，红色部分代表本人认为翻译错误，或者原书撰写时不支持，现在支持的功能。
3章
传统DB：通常会提供限制最大长度的“字符数组”，定长的记录更容易进行建立索引、数据扫描
hive：不
转载
2023-10-13 22:13:49
61阅读
# 教你如何创建Hive实例
## 1. 简介
Hive是一个建立在Hadoop之上的数据仓库基础设施，它提供了SQL接口来查询和分析存储在Hadoop中的大规模数据集。在这篇文章中，我将引导你一步一步创建一个Hive实例。
## 2. 创建Hive实例的流程
| 步骤 | 描述 |
| ---- | ---- |
| 步骤1 | 准备Hadoop集群 |
| 步骤2 | 安装Hive |
原创
2023-08-02 06:30:05
57阅读
初识Hive1.Hive提供Hive查询语音（简称HiveQL或HQL）来查询存储在Hadoop集群中的数据。2.Hive（本质）可以将大多数查询转换为MapReduce任务（job）3.Hive适用于数据仓库应用程序，使该应用程序进行相关的静态数据分析，可以维护海量数据，并对数据进行挖掘，形成意见和报告，不需要快速响应给出结果，数据本身也不会频繁变化。4.Hive的使用受限于Hadoop及HDF
转载
2023-08-20 22:24:26
122阅读
目录注：只是为了以后忘了，好翻。。。。。。。做个总结一) hive 操作1) hive -e2) hive -f3) 查看在hive中输入的所有历史命令4) hive运行日志修改二) hive参数配置三) hive数据类型基本数据类型集合数据类型1）复杂类型解释2）建表语句：3) 造数据 ：text.txt4）load数据5) 访问方式hive类型转换四) DDL操作库操作
转载
2023-09-18 16:36:39
13阅读
Hive编程指南整理部分基础概念 文章目录Hive编程指南整理部分基础概念部分笔记Hive服务Hive中的变量和属性命名空间Hive CLIHive查看操作命令历史在Hive中使用Hadoop的dfs命令Amazon S3 部分笔记MapReduce任务的启动过程需要消耗较长的时间，所以Hive的查询延迟比较严重。Hive不支持OLTP（联机事务处理）所需的关键功能，而更接近成为一个OLAP（联机
转载
2023-07-20 20:28:33
93阅读
Hive基础Hive 概念Hive优缺点优点缺点Hive名词概念hive底层执行流程hive 与RDBMS传统关系型数据库对比查询语言数据更新执行延迟数据规模hive基本数据类型（原子数据类型）hive的集合数据类型类型转换隐性转换规则DDL语言内部表创建普通内部表createcreate table ascreate table like (只创建结构)外部表外部表创建内部表和外部表互转查看表
转载
2023-07-12 21:56:40
102阅读
1、数据导入1）向表中装载数据（Load）（1）语法hive> load data [local] inpath '数据的path' [overwrite] into table student [partition (partcol1=val1,…)];（1）load data:表示加载数据（2）local:表示从linux本地加载数据到hive表；否则从HDFS加载数据到hive表（3）
转载
2024-09-06 14:26:04
62阅读
文章目录Zookeeper入门概述特点数据结构应用场景下载地址ZooKeeper的安装安装配置参数解读Zookeeper内部原理选举机制节点类型Stat结构体监听器原理写数据流程Zookeeper操作分布式安装部署客户端命令行操作API应用Maven坐标创建ZooKeeper客户端创建节点获取子节点并监控节点的变化判断节点是否存在案例：监听服务器节点动态上下线服务器客户端 Zookeeper入门
转载
2024-07-10 21:39:08
37阅读
一、购物问题 小明的女朋友最喜欢在网上买买买了，可是钱包里钞票有限，不能想买啥就买啥。面对琳琅满目的物品，她想买尽可能多的种类，每种只买一件，同时总价格还不能超过预算上限。于是她请小明写程序帮她找出应该买哪些物品，并算出这些物品的总价格。 输入规范： 每个输入包含两行。第一行是预算上限。第二行是用空格分隔的一组数字，代表每种物品的价格。所有数字都为正整数并且不会超过10000。
转载
2023-07-11 12:36:23
224阅读
文章目录案例1：买飞机票案例2：找素数案例3：开发验证码案例4：数组元素的复制案例5：评委打分案例6：数字加密案例7：模拟双色球 案例1：买飞机票import java.util.Scanner;
public class Test1 {
public static void main(String[] args) {
//用户输入机票原价、月份、仓位类型
转载
2023-06-01 15:32:44
108阅读
java编程案例 案例一：飞机票查看优惠系统案例二：获取素数案例三：验证码模块案例四：数组元素的复制案例五：评委打分案例六：数字加密程序案例七：模拟双色球系统 案例一：飞机票查看优惠系统项目需求：机票价格按照淡季旺季、头等舱和经济舱收费，输入机票原价、月份和头等舱或经济舱。机票最终优惠价格的计算方案如下 ：旺季（5-10月）头等舱9折，经济舱8.5折，淡季（11月到来年4月)头等舱7折，经济舱6
转载
2023-08-20 23:02:24
34阅读
第一部分：产生背景 产生背景
•为了满足客户个性化的需求，Hive被设计成一个很开放的系统，很多内容都支持用户定制，包括：
•文件格式：Text File，Sequence File
•内存中的数据格式： Java Integer/String, Hadoop IntWritable/Text
•用户提供的
转载
2024-08-16 19:15:38
50阅读
本节书摘来异步社区《Hive编程指南》一书中的第1章，第1.1节，作者： 【美】Edward Capriolo , Dean Wampler , Jason Rutherglen 译者： 曹坤1.1 Hadoop和MapReduce综述如果用户已经熟悉Hadoop和MapReduce计算模型的话，那么可以跳过本节。虽然用户无需精通MapReduce就可以使用Hive，但是理解MapReduce的基
转载
2024-01-25 14:41:42
58阅读
package com.sxc.day;import java.io.IOException;import java.net.DatagramPacket;import java.net.DatagramSocket;import java.net.InetSocketAddress; /** * ...
转载
2021-07-12 18:15:00
832阅读
2评论
一、Socket简介1、网络中进程间通信本机进程使用进程号区别不同的进程进程间通信方式有管道、信号、消息队列、共享内存、信号量等。网络中进程间的通信首先需要识别进程所在主机在网络中的唯一标识即网络层的IP地址主机上的进程可以通过传输层的协议与端口号识别。 2、Socket原理 Socket是应用层与 ...
转载
2021-10-21 16:31:00
1149阅读
2评论
RDD编程在Spark中，RDD被表示为对象，通过对象上的方法调用来对RDD进行转换。经过一系列的transformations定义RDD之后，就可以调用actions触发RDD的计算，action可以是向应用程序返回结果(count, collect等)，或者是向存储系统保存数据(saveAsTextFile等)。在Spark中，只有遇到action，才会执行RDD的计算(即延迟计算)，这样在运
转载
2023-09-28 00:58:46
139阅读
中文编程汉语编程实例
原创
2018-08-25 20:31:25
7452阅读
点赞
文章目录前言一、Hive的基本概念1.1 什么是Hive?1.2 Hive优缺点1.3 Hive架构1.4 Hive与传统数据库比较二、Hive 安装与使用2.1 安装部署2.2 启动并使用Hive2.3 Hive元数据配置到MySQL2.4 使用元数据服务的方式访问 Hive2.5 使用 JDBC的方式访问 Hive2.6 Hive 常用交互命令2.7 Hive 其他命令操作2.8 Hive
转载
2023-09-01 14:53:35
39阅读
Spark执行Hive 提示：Spark执行Hive的表只能是外表或是表不包含ACID事物的表 文章目录Spark执行Hive前言一、pom.xml导入依赖执行的包二、使用步骤1.编写代码2.Spark执行脚本异常处理Spark SQL 生成RDD过程(Catalyst)从ULEP到RLEP过程优化RLEP 前言Hive一般作为大数据的数据仓库，因其语句和SQL大部分通用。所以很多数据为存储在Hi
转载
2023-08-18 22:36:57
146阅读
目录准备工作：需求：最终效果解题思路：SparkSqlOnHive的UDAF实现代码1、pom.xml配置2、创建UDAF类2、创建TopN类3、运行结果 准备工作：--创建表
CREATE TABLE `user_visit_action`
(
`date` string,
`user_id` bigint,
`sess
转载
2023-09-21 08:43:51
51阅读
