数据仓库搭建之数据仓库环境准备1.Hive安装部署（1）我们首先需要将apache-hive-3.1.2-bin.tar.gz上传到linux的**/opt/software**目录下（2）解压apache-hive-3.1.2-bin.tar.gz到**/opt/module/**目录下面[root@hadoop102 software]$ tar -zxvf /opt/software/apa
转载
2023-07-20 20:17:04
80阅读
背景：最近做的一个项目需求需要把生产环境服务器上指定目录下数据推送到hdfs上，然后通过hive去查询，但在安装hive之前需要先安装mysql，原因是啥呢？先了解下他们之间的关系。一、什么是HiveHive是一个基于Hadoop的数据仓库平台。通过hive，我们可以方便地进行ETL（数据仓库技术，将数据从来源端经过抽取（extract）、转换（transform）、加载（load）至目的端的过程
转载
2023-05-18 14:09:54
158阅读
# 如何实现MySQL数据库没有hive数据库
## 概述
在这篇文章中，我们将介绍如何在MySQL数据库中创建一个没有hive数据库的实例。我们将通过一系列步骤来实现这个目标，包括创建数据库、创建表和插入数据等。我将为你提供每一步所需的代码，并解释每个代码的含义。
## 步骤
下面是实现这个目标的步骤的概览。我们将在后面的章节中逐步详细解释这些步骤。
| 步骤 | 动作 |
| ---
原创
2023-07-19 15:18:33
237阅读
备注: Hive 版本 2.1.1 文章目录一.Hive关系模型概述1.1.Database1.2 Table1.2.1 管理表和外部表1.2.2 永久表和临时表1.3 Partition1.4 Bucket二.数据定义语言(DDL)2.1 HiveQL保留关键字2.2 Database相关DDL操作2.2.1 SHOW 命令2.2.2 DESCRIBE命令2.2.3 CREATE命令2.2.4
转载
2023-07-13 16:37:46
0阅读
首先，我们在介绍DDL之前，先让我们来了解一下hive的那些database，table，partition，bucket在hdfs上面是怎么样展示的。这四个里面前三个在hdfs上面都是文件夹，而具体的数据就是存储在文件里面的，所以当我们添加数据进去的时候实际上就是往这个表所代表的文件夹里面添加文件。另外，我们也知道，在hive刚搭建好的时候里面就有一个默认的数据库了default，它在hdfs上
转载
2024-01-23 21:32:19
65阅读
最近博主希望优化现有的业务框架，打算搭建一套 以Hive 为存储的数据仓库系统。之前没有了解过hive , 本次是首次使用Hive, 不足之处欢迎各位指正。Tips : 在安装HIVE 之前请确保，已经安装了Hadoop此种方式存在不足：不能使用多个链接 连接Hive 数据库，会报错！！！！！！解决方法： 使用外部的元数据库，可以参考我接下来的一篇文章。HIVE_第二讲_ Hive on
1、数据仓库与数据库区别数据库与数据仓库的区别实际讲的是OLTP 与 OLAP 的区别。操作型处理，叫联机事务处理 OLTP（On-Line Transaction Processing），也可以称面向交易的处理系统，它是针对具体业务在数据库联机的日常操作，通常对少数记录进行查询、修改。用户较为关心操作的响应时间、数据的安全性、完整性和并发支持的用户数等问题。传统的数据库系统作为数据管理的主要手段
转载
2023-08-04 23:44:24
175阅读
# 实现“mysql删除hive数据库”教程
作为一名经验丰富的开发者，你需要教会刚入行的小白如何实现“mysql删除hive数据库”。下面是整个流程的步骤表格：
| 步骤 | 操作 |
| ---- | ---- |
| 1 | 连接到MySQL数据库 |
| 2 | 执行删除Hive数据库的SQL语句 |
| 3 | 确认数据库已被删除 |
接下来，让我们一步步来实现这个操作：
###
原创
2024-06-28 06:55:42
51阅读
数据库分类：MySQL & Hive
## 引言
在计算机科学和软件工程领域，数据库是一个非常重要的概念。数据库是一个用于存储和管理数据的软件系统。它可以在不同的场景和需求下使用不同的数据库类型。本文将重点介绍两种常见的数据库类型：MySQL和Hive。我们将会详细讨论它们的特点、优势和使用场景，并提供一些代码示例来帮助读者更好地理解和应用这些数据库。
## MySQL
MySQL是一种关
原创
2023-12-19 05:04:02
45阅读
文章目录一 、数据库的操作-- 链接数据库（2种方式）-- 退出数据库-- 显示数据库版本-- 显示时间-- 查看所有数据库-- 创建数据库-- 查看创建数据库的语句-- 查看当前使用的数据库-- 使用数据库-- 删除数据库（慎用！）二、数据表的操作-- 查看当前数据库中所有表-- 创建表-- 查看表结构表中插入数据：-- 查看表的创建语句修改表-- 增删改查(curd) 一 、数据库的操作–
转载
2023-08-04 21:42:43
167阅读
对于数据库博主也不是那么精通，现在需要学习HIVE，之前也接触过mysql,HIVE和mysql虽然也很大的相同但是也存在差异性，比如不需要主键，支持事务(ps：这篇文章就是讲解事务的原理，其实我也不清楚)事务(Transaction)是并发控制的基本单位。所谓的事务，它是一个操作序列，这些操作要么都执行，要么都不执行，它是一个不可分割的工作单位。例如，银行转账工作：从一个账号扣款并使另一个账号增
转载
2024-07-21 21:37:07
30阅读
一、Hive数据导入导出1、hive数据导出 很多时候，我们在hive中执行select语句，希望将最终的结果保存到本地文件或者保存到hdfs系统中或者保存到一个新的表中，hive提供了方便的关键词，来实现上面所述的功能。
1.将select的结果放到一个新表中（首先要用create table创建新的表格）
insert overwrite table table_name
转载
2023-05-18 13:45:56
422阅读
Hive中MySQL的安装及绑定Hive 默认使用的元数据库为 derby，开启 Hive 之后就会占用元数据库derby数据库只支持单用户访问且不与其他客户端共享数据MySQL数据库可支持多用户访问且可与其他客户端共享数据将 Hive 的元数据地址改为 MySQL数据库[mnlg@XJ202 ~]$ my_hadoop.sh start //启动hadoop
[mnlg@XJ202 ~
转载
2023-08-18 23:41:41
195阅读
一、添加jar包 jmeter需要通过jar包才可以链接数据库，所以我们首先给jmeter添加一个jar包（该jar包只能连接mysql，l链接不同的数据库则需要下载其对应jar包）选中测试计划，最下面点击浏览，选择架包路径就可以了。 二、添加JDBC Connection Configuration右击添加>>>配置元件>>>J
转载
2023-12-13 12:50:21
110阅读
Hive的介绍和特点一.什么是Hive二.Hive的优缺点1.Hive的优点2.Hive的缺点三.Hive和数据库比较 一.什么是Hive1.Hive是基于Hadoop一个数据仓库工具，用来数据提取和加载。 2.是一个可以存储查询分析在hadoop中大规模数据集的一个机制(机制:协调各个部分之间关系以更好地发挥作用的具体运行方式) 3.能够将结构化的数据映射成一张数据库的表，同时提供sql的查询
转载
2023-09-20 06:09:51
39阅读
数据库的类型粗略来说可以分为关系型数据库和非关系型数据库，详细的分类如下： 1、关系型数据库Relational Database关系型数据库的使用最为普遍流行，排名前十的数据库里就有6个是关系型数据库，如Oracle、MySQL、微软的SQL Server、PostgreSQL、IBM的DB2以及装机量最多的数据库SQLite以及大数据库的数据库Hive2、文档型数据库Do
转载
2024-01-24 21:34:19
213阅读
文章目录使用mysql数据库一、查看数据库结构1.1查看当前服务器中包含的库1.2查看当前使用的库中包含的表1.3有几个用户1.4查看表的结构(字段）1.5SQL语言概述二、创建及删除库和表2.1创建新的库2.2创建新的表2.3 drop table 表名；删除表2.4删除一个数据库三、管理表中数据记录3.1插入数据记录3.2查询数据记录3.3修改、更新数据表中的数据记录3.4设置用户权限3.5
转载
2023-08-21 10:35:50
117阅读
HIVE hive是基于hadoop的一个数据仓库工具，可以将结构化的数据映射成一张数据表，并提供简单的sql查询功能，可以将sql语句转化为MapReduce任务进行运行，优点是学习成本低，可以通过类sql语句快速简单的实现MapReduce的统计，不必专门开发MapReduce应用，十分适合数据仓库的统计。 &nbs
转载
2023-07-12 21:13:45
182阅读
一、Hive概述Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供类SQL查询功能。其本质是将SQL转换为MapReduce的任务进行运算，底层由HDFS来提供数据的存储，说白了hive可以理解为一个将SQL转换为MapReduce的任务的工具，甚至更进一步可以说hive就是一个MapReduce的客户端本质是：将HQL转化成MapReduce程序二、H
转载
2024-01-11 13:20:29
77阅读
表、索引等基本操作
一、MySQL基本操作1、数据库和数据对象在MySQL中数据库分为系统数据库和用户数据库两类。系统数据库是安装MySQL后自带的，一般有information_schema和performance_schema及mysql：information_schema存储了系统中的一些数据库对象信息，如用户表信息、列信息、权限信息、字符集信息
转载
2023-06-01 16:28:41
309阅读
