Hive目前底层还是用MapReduce,以后可能会用Spark,Tez。Hive差不多是一个查询接口,你的SQL语句还是会翻译成MapReduce任务的,你用explain就可以看到这些任务的执行计划。下面介绍下hive的基础安装过程以及简单的使用。环境信息:虚拟机数量:3台
操作系统:Ubuntu 14.04
实验环境及版本:
Hadoop:Hadoop 2.2.0
Java:java ver            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-24 10:59:56
                            
                                104阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            Hive的运行需要在Hadoop环境下Hive使用Hadoop,所以:您必须在您的路径中安装Hadoopexport HADOOP_HOME=<hadoop-install-dir>此外,在创建hive表时,必须使用以下命令HDFS创建/tmp和/user/hive/warehouse(又名hive.metastore.warehouse.dir),并设置它们权限chmod g+w&n            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-12 17:58:48
                            
                                49阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            文章目录Hive基本概念一、Hive介绍1、什么是Hive2、Hive的优缺点3、Hive的特点二、Hive架构1、架构图2、基本组成3、Hive与传统数据库对比 Hive基本概念一、Hive介绍1、什么是HiveHive是一个构建在Hadoop上的数据仓库框架。最初,Hive是由Facebook开发,后来移交由Apache软件基金会开发,并作为一个Apache开源项目。Hive是基于Hadoo            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-24 11:00:06
                            
                                47阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            文章预览:1.Hive简介2.Hive部署(前提是部署好Hadoop) 1.Hive简介1.地址 官网:http://hive.apache.org/ GitHub地址:github.com/apache/hive CDH版本:http://archive.cloudera.com/cdh5/cdh/5/ 中下载hive-1.1.0-cdh5.16.2.tar.gz 软件使用上Hadoop、Hi            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-10-03 20:05:23
                            
                                32阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            一、Hive入门1.1 Hive简介1.1.1 hive出现的原因FaceBook网站每天产生海量的结构化日志数据,为了对这些数据进行管理,并且因为机器学习的需求,产生了hive这门技术,并继续发展成为一个成功的Apache项目。1.1.2 什么是hive         hive是一个构建在Hadoop上的数据仓库工具(框架),可以将hdfs上的结构化的数据文件映射成一张数据表,并可以使用类SQ            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-09-08 13:04:41
                            
                                135阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            1. Hive 简介        Hive 是一个基于 hadoop 的开源数据仓库工具,用于存储和处理海量结构化数据。它把海量数据存储于 hadoop 文件系统,而不是数据库,但提供了一套类数据库的数据存储和处理机制,并采用 HQL (类 SQL )语言对这些数据进行自动化管理和处理。我们可以把 Hive 中海量结构化数据看成一个个的表,而实际上这些数据            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-09-03 12:57:53
                            
                                49阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            Hadoop集群搭建之Hive安装1. 准备工作准备好已经安装了Hadoop的集群服务器之后,需要在其中一台中安装MySQL数据库,安装可以参考CentOS7安装MySQL5.7这篇文章。下载Hive的安装包并上传至其中一台服务器中,下载地址2. Hive本地安装1. 安装目录规划统一安装路径:/opt/modules
统一软件存放路径:/opt/software2. 上传压缩包1. 将压缩包上传            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-09-08 20:32:19
                            
                                34阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            Hive简介Hive是基于hadoop的一个数据仓库,可以将sql语句转化为MapReduce任务进行运行,不必要专门开发MapReduce,Hive定义了简单的类SQL,即HQL,可以用来对数据进行ETL(提取转化加载)操作。一 . 安装前准备Hive是基于hadoop的,所以首先要安装好hadoop集群,至于安装hadoop可以参考,如和选择版本,在官网上http://hive.apache.            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-24 08:56:15
                            
                                60阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            一、Hive基本概念1、概念
   Hive:由Facebook开源用于解决海量结构化日志的数据统计。 
  Hive是基于Hadoop的一个数据仓库工具,可以将结构化的数据文件映射为一张表,并提供类SQL查询功能。  本质是:将HQL转化成MapReduce程序          HQL转化成MapReduce  (1)Hive处理的数据存储在HDFS(2)Hive分析数据底层的实            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-08-30 19:26:13
                            
                                106阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
             目录一.Hive的安装和配置1.Hive并不是hadoop自带的组件,因此我们需要去下载hive,此次课我们使用hive 1.2.1版本,下载地址为:2.下载完成之后,安装包默认保存在下载文件夹中,解压安装包apache-hive-1.2.1-bin.tar.gz至路径 /usr/local,命令如下:3.然后切换至目录 /usr/local,将文件夹名改为hive(为了后续的方便),            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-09-14 13:21:37
                            
                                187阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            Hive详解一、Hive简介二、Hive总体架构hive架构图如下:Hive基本组成三、Hive特点优点缺点四、Hive基本语法1、Hive DDL语法2、Hive DML语法五、总结 一、Hive简介hive是什么? “懒人改变世界”,这是我一直坚信的理念。并不是提倡大家偷懒,而是要有懒人的思想,要想尽一切办法来减少自己的工作量,减少重复劳动力,提高生产效率。没有hive之前,作为程序猿需要对            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-12 11:15:36
                            
                                78阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            Hive在Hadoop集群下的安装 文章目录Hive在Hadoop集群下的安装一、hive安装前必备步骤二、安装Hive三、配置Hive的环境变量四、测试连接 一、hive安装前必备步骤Hadoop集群能正常运行安装参考MySql安装 安装参考 需要增加以下步骤: 1)输入 :my -uroot -pok 启动数据库 2)输入:use mysql创建用户:create user 'bigdata'            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-04 10:58:12
                            
                                60阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            hive            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2018-08-29 18:49:46
                            
                                1691阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            origin: http://blog.163.com/songyalong1117@126/blog/static/1713918972014124481752/hadoop hive 的安装问题  2014-02-24 16:10:13|  分类: hadoop|举报|字号 订阅能了一下午终于把hive搞好了,其中出现很多的            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                            精选
                                                        
                            2014-11-17 17:08:38
                            
                                819阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            安装部署 Hive主要步骤 :解压并安装 Hive 安装配置 MySQL 配置 Hive 启动 Hive 验证 Hive 环境1.安装部署 Hive该部分的安装需要在 Hadoop 已经成功安装的基础上,并且要求 Hadoop 已经正常启动。 Hadoop 正常启动的验证过程如下: (1)使用下面的命令,看可否正常显示 HDFS 上的目录列表hdfs dfs -ls /(2)使用谷歌浏览器查看相应            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-11-18 23:20:28
                            
                                464阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            目录1.安装部署Hive的基础前提:1.1、hadoop 集群配置2、Hive安装3.安装配置MySQL3.1、启动MySQL服务:3.2、mysql -u root -p3.3、然后创建myhive 用户:4.配置Hive4.1、配置hive-env.sh文件4.2、进入 hive安装目录下的配置目录,然后修改配置文件:4.3、将mysql的java connector复制到依赖库中,其中,第3            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-25 00:07:04
                            
                                1170阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            一、Hive的简介和配置  1.简介    Hive是构建在Hadoop之上的数据操作平台l Hive是一个SQL解析引擎,它将SQL转译成MapReduce作业,并在Hadoop上运行Hive表是HDFS的一个文件目录,一个表名对应一个目录名,如果存在分区表的话,则分区值对应子目录名。  2.Hive的体系结构    Hive作为Hadoop的数据仓库处理工具,它所有的数据都存储在Ha            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-11-22 19:35:06
                            
                                114阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            安装数据仓库Hive实验目的要求实验环境软件版本实验步骤步骤一:Hive工具安装配置步骤二:开启zookeeper集群,Hadoop集群以及HBase集群步骤三:创建hive元数据数据库步骤五:Hive工具启动和验证 实验目的要求目的: 1、数据仓库工具Hive的安装和配置 2、掌握数据仓库工具Hive的安装和配置 要求: 1、完成Hive工具的安装和配置 2、Hive工具能够正常启动运行 3、            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-13 17:28:08
                            
                                110阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            一、所需软件 Java 必须安装。Hadoop 2.7 及以后版本,需要安装 Java 7 ssh 必须安装并且保证 sshd 一直运行,以便用 Hadoop 脚本管理远端Hadoop 守护进程,如果没有安装,ubuntu系统:$ sudo apt-get install ssh
$ sudo apt-get install rsync二、下载hadoop 地址:http://www.apache            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-03 21:12:47
                            
                                89阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            1.show databases 查看有那些数据库2.创建park数据库,实际上hadoop的HDFS文件系统里创建一个目录节点,统一存在/usr/hive/wareshouse目录下3.进入数据库4.查看当前数据库下的所有表5.创建stu表,以及相关的两个字段 在hive中,用的是string,不用char和varchar,此外,所创建的表,也是HDFS里的一个目录节点。 在hive里面有一个d            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-20 19:37:15
                            
                                73阅读
                            
                                                                             
                 
                
                                
                    