在Hadoop入门学习阶段，很多同学都知道Hadoop框架当中，由HDFS提供分布式存储支持，因此常常对HDFS产生误会：HDFS是数据库吗？HDFS是什么数据库？事实上，HDFS并非是数据库，官方定义叫做分布式文件系统，该怎么去理解呢？HDFS，其实是Hadoop Distributed File System的简称，我们从命名就可以看出来，这真的是文件系统，而非数据库。 HDFS
转载
2023-07-14 15:58:48
47阅读
hive是什么（官网概念)Apache Hive™数据仓库软件有助于使用SQL读取，写入和管理驻留在分布式存储中的大型数据集。可以将结构投影到已存储的数据上。提供命令行工具和JDBC驱动程序，用于将用户连接到Hive。Hive 是建立在Hadoop (HDFS/MR)上的用于管理和查询结果化/非结构化的数据仓库； 一种可以存储、查询和分析存储在Hadoop 中的大规模数据的机制； Hive 定义了
转载
2023-11-28 09:19:35
35阅读
一. Meta Store使用mysql客户端登录hadoop100的mysql,可以看到库中多了一个metastore现在尤其要关注这三个表DBS表,存储的是Hive的数据库TBLS表,存储的是Hive中的表,使用DB_ID和DBS表关联COLUMNS_V2存储的是每个表中的字段信息 Meta Store并不存储真实的数据,只是存储数据库的元数据信息,数据是存储在HDFS上的 
转载
2023-09-04 15:52:53
114阅读
## hive数据库查看hdfs文件的流程
首先，让我们来了解一下查看HDFS文件的流程。整个过程可以分为以下几个步骤：
1. 连接到Hive数据库
2. 创建外部表并指定HDFS文件的路径
3. 查看表中的数据
接下来，我将逐步解释每个步骤，并提供相应的代码以帮助你完成任务。
### 步骤1：连接到Hive数据库
首先，你需要连接到Hive数据库。Hive是建立在Hadoop之上的数据
原创
2023-10-12 09:02:50
104阅读
# Hive数据库没有HDFS目录
在使用Hive进行数据分析时，我们通常会使用HDFS（Hadoop分布式文件系统）来存储和管理数据。HDFS是Hadoop生态系统中的一个核心组件，它提供了高可靠性、高扩展性和高容错性的分布式存储解决方案。然而，有时我们可能会遇到Hive数据库没有HDFS目录的情况。本文将介绍这种情况可能产生的原因以及如何解决它。
## 问题描述
当我们在Hive中创建数
原创
2023-12-13 09:58:28
223阅读
1.声明当前内容主要用于本人学习和复习，当前的内容为，切换数据库为mysql数据库，并实现hive连接介绍：当前的Hive部署到Linux中使用windows10中的putty操作Linux中的Hive，实现Linux中连接Windos10中的Mysqlmysql 部署在Windows10中mysql部署在192.168.1.109(windows10中)，hive部署在192.168.1.107
转载
2023-07-14 23:22:55
94阅读
从数据库角度恢复已删除的数据通常需要使用备份和恢复工具，例如 pg_dump、pg_restore 或 pg_basebackup。以下是一些可能有用的步骤：确定删除数据的时间点 通过 PostgreSQL 中的 WAL 日志和 archived WAL 日志，找到删除数据时的时间点，也就是最后一个有效的备份后到删除数据前的时间段。停止 PostgreSQL 服务 在恢复期间，应停止 Postgr
转载
2024-04-27 20:15:14
739阅读
*hive-hql
1.数据类型
数值型：int
DECIMAL、DOUBLE
字符串：string
日期类型：date（毫秒），timestamp（纳秒）
2.数据定义语法：DDL （重要）
表的定义
表结构的修改
数据库对象：table、view、index、trigger（触发器）、
转载
2023-07-20 20:15:51
187阅读
# Hive数据库中的存储路径与HDFS地址
在大数据生态系统中，Hive是一个数据仓库工具，它用于在分布式环境下进行数据的查询和分析。Hive数据是存储在Hadoop分布式文件系统（HDFS）中的，因此理解Hive的存储路径与HDFS地址对有效利用Hive至关重要。
## Hive与HDFS的关系
Hive使用HDFS作为其底层存储系统。在创建Hive表时，默认情况下，Hive会将数据存储
原创
2024-08-06 11:52:37
103阅读
# Hive数据库HDFS目录查不到
## 引言
在使用Hive进行数据分析和查询时，经常会遇到Hive数据库无法在HDFS目录中找到的情况。这个问题可能由于多种原因引起，本文将从Hive配置、HDFS文件系统和权限等方面进行分析和解决。
## 问题描述
当我们尝试在Hive中查询或加载数据时，可能会遇到类似如下的错误信息：
```
Error: does not exist (sta
原创
2023-12-22 10:05:58
887阅读
HBase与Hive的对比hive:数据仓库：Hive的本质其实就相当于将HDFS中已经存储的文件在Mysql中做了一个双射关系，以方便使用HQL去管理查询。用于数据分析、清洗：Hive适用于离线的数据分析和清洗，延迟较高。基于HDFS、MapReduce：Hive存储的数据依旧在DataNode上，编写的HQL语句终将是转换为MapReduce代码执行。HBase数据库：是一种面向列族存储的非关
转载
2024-04-18 14:56:46
29阅读
学习数据库时，我们只是以学习的态度，考虑如何使用数据库命令语句，并未想过工作中，如果误操作一下，都可能导致无可挽回的损失。当我在工作中真正遇到这些问题时，我开始寻找答案。今天主要以oracle数据库为例，介绍关于表中数据删除的解决办法。（不考虑全库备份和利用归档日志） 删除表中数据有三种方法：·delete（删除一条记录）·drop或trunc
转载
2024-04-21 19:13:21
161阅读
简介： PostgreSQL是以加州大学伯克利分校计算机系开发的 POSTGRES2为基础发展起来的对象关系型数据库管理系统（ORDBMS），可以说是目前世界上最先进，功能最强大的自由数据库管理系统。 它的标志是一个大象头。 安装： PostgreSQL的安装方法比
由于 Hive 采用了类似 SQL 的查询语言 HQL(Hive Query Language)，因此很容易 将 Hive 理解为数据库。其实从结构上来看，Hive 和数据库除了拥有类似的查询语言，再无 类似之处。本文将从多个方面来阐述 Hive 和数据库的差异。数据库可以用在 Online 的应用 中，但是 Hive 是为数据仓库而设计的，清楚这一点，有助于从应用角度理解 Hive 的特性。1.
转载
2023-07-12 21:55:31
85阅读
因磁盘空间不足，想把测试环境上面没有用数据库干掉。偷懒，想看一下某测试环境上面建有几个库，于是使用dbca，选择删除数据库选项，看到了该服务器上有几个数据库，看到后，准备点取消的，但是习惯性点了“完成”。事故发生在win平台。因为点了删除数据库选项的时候，默认它就选中了一个数据库，之后点完成，就把选中的这个库给删了，于是忙点取消，但发现没用，就用
原创
2013-04-22 15:50:08
1693阅读
Hive（一）简介及基本操作一、简介 Hive是一个构建在hadoop之上的数据仓库，可将结构化的数据文件映射成表，并提供类SQL查询功能，用于查询的SQL语句会被转化为MapReduce作业，然后提交到Hadoop上运行。数据类型基本数据类型：TINYINT SMALINT INT BIGINT BOOLEAN FLOAT DOUBLE STRING TIMESTAMP BINARY集合数据类型
转载
2023-07-12 21:14:08
90阅读
目录前言一 hive的数据类型1.1 基本数据类型1.2 集合数据类型1.3 类型转换 二 DDL（Data Definition Language）数据定义2.1数据库操作2.2 数据表操作三 数据加载与导出3.1 数据装载语法3.2 数据导出语法前言 hive作为当下流行的hadoop数据处理仓
转载
2023-11-24 21:08:24
34阅读
? 博主介绍 ?? 博主主页：喵的主页 ✨主攻领域：【大数据】【java】【python】【面试分析】 HDFS元数据管理机制1. 元数据管理概述2. 元数据目录相关文件3. Fsimage、Edits3.1 概述3.2．内容查看 1. 元数据管理概述HDFS元数据，按类型分，主要包括以下几个部分： 1、文件、目录自身的属性信息，例如文件名，目录名，修改信息等。 2、文件记录的信息的存储相关的信息
转载
2023-09-13 21:36:28
106阅读
1 查看当前数据库内容并备份数据库查看数据库信息：备份数据库：[root@localhost ~]# mysqldump -u root -p t > /mnt/t.sqlEnter password: [root@localhost ~]# ll /mnt/t.sql -rw-r--r-- 1 root root 1771 Aug 25 11:56 /mnt/t.sql 2 开启
原创
2022-06-24 09:40:28
621阅读
点赞
hive基本概念hive简介hive是什么Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供类SQL查询功能。为什么使用hive1）简单易上手。提供了类sql查询语言HQL，提供快速开发的能力。2）避免了去写MapReduce，减少开发人员的学习成本。3）统一的元数据管理（HCalalog）。可与pig，presto等共享。4）为超大数据集设计的计算/扩
