一:hive的安装部署 1.把apache-hive-1.2.1-bin.tar.gz上传到linux的/opt/software目录下(可根据自己目录来,下同)2.解压apache-hive-1.2.1-bin.tar.gz到/opt/module/目录下面tar -zxvf apache-hive-1.2.1-bin.tar.gz -C /opt/module/3.在mudule目录下修改ap            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-14 11:10:36
                            
                                89阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            Hive简介(数据仓库工具)hive是基于Hadoop的一个数据仓库工具,用来进行数据提取、转化、加载,这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。hive数据仓库工具能将结构化的数据文件映射为一张数据库表,并提供SQL查询功能,能将SQL语句转变成MapReduce任务来执行。Hive的优点是学习成本低,可以通过类似SQL语句实现快速MapReduce统计,使MapRed            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-06-07 10:01:33
                            
                                27阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            近日,在腾讯云和阿里云购买了服务器,尝试搭建大数据环境。在腾讯云选择了安装64位的Centos7.0系统,阿里云选择了安装64位的Wndows  Server2012系统。由于服务器数量的原因,hadoop采取了伪分布式部署模式。Hive有三种安装方式:嵌入模式,本地模式和远程模式。本地模式只是在下面配置的hive-site.xml中,把连接mysql的url中的ip改成localh            
                
         
            
            
            
            @TOC<hr style=" border:solid; width:100px; height:1px;" color=#000000 size=1">前言<font color=#999AAA >为了后续更好的学习hive数仓,这里先附上Hive安装部署的教程。后续文章会详细讲解hive的原理和使用。安装Hive的前置条件是: 1.安装好对应版本的hadoop集群,并            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2021-03-10 19:37:07
                            
                                161阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            hive安装部署 浪尖 浪尖聊大数据 1、 准备环境1, 软件准备Java-- jdk-8u121-linux-x64.tar.gzHadoop--hadoop-2.7.4.tar.gz (jdk1.7会报错)Hive-- apache-hive-1.2.1-bin.tar.gz本系列教程所有jar包,请关注微信公众号 :Spark高级玩法,输入software获取。Centos 6.5是本文采用            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2021-03-17 13:28:44
                            
                                264阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            # Hive安装部署
Hive是基于Hadoop和HiveQL的数据仓库基础设施,它提供了类似于SQL的查询语言HiveQL,可以对存储在Hadoop集群中的数据进行分析和查询。本文将详细介绍如何安装和部署Hive,并提供一些代码示例帮助读者更好地理解。
## 安装Hive
首先,确保你已经成功安装了Hadoop集群。接下来,按照以下步骤安装Hive:
1. 下载Hive安装包,并解压缩到            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2023-08-22 05:21:48
                            
                                14阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            1、 准备环境
 
1, 软件准备
Java-- jdk-8u121-linux-x64.tar.gz
Hadoop--hadoop-2.7.4.tar.gz (jdk1.7会报错)
Hive-- apache-hive-1.2.1-bin.tar.gz
本系列教程所有jar包,请关注微信公众号 :Spark高级玩法,输入software获取。
Centos 6.5是本文采用的操作系统
2, 安装            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2021-07-27 11:10:56
                            
                                156阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            ------------------------------本案例hive和mysql安装在同一台服务器上-----------------            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2021-08-07 10:45:06
                            
                                175阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            4.1 Linux系统软件安装方式Linux上的软件安装有以下几种常见方式:1、二进制发布包软件已经针对具体平台编译打包发布,只要解压,修改配置即可 2、RPM发布包软件已经按照redhat的包管理工具规范RPM进行打包发布,需要获取到相应的软件RPM发布包,然后用RPM命令进行安装 3、Yum在线安装软件已经以RPM规范打包,但发布在了网络上的一些服务器上,可用yum在线安装            
                
         
            
            
            
            QQ交流群:335671559,欢迎交流
环境准备
Linux系统
hadoop安装完毕,正常执行,hadoop版本号为1.x或者2.x都能够
hive安装包
1.Hive安装
Hive的安装配置还是比較简单得。
首先,到Apache下载Hive,本次安装使用的Hive版本号为hive-0.13.0。
     其次,下载完毕后,将hive解压到想要安装的文件夹下。
tar            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2017-04-25 11:29:00
                            
                                133阅读
                            
                                                                                    
                                2评论
                            
                                                 
                 
                
                             
         
            
            
            
            在此强调:Hadoop,zookpeer,spark,kafka,mysql已经正常启动一、开始安装部署hive基础依赖环境: 1,jdk   1.6+ 2, hadoop 2.x 3,hive 0.13-0.19 4,mysql   (mysql-connector-jar)安装详细如下:#java 
 export JAVA_HOME=/soft/jdk1.7.0_79/            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-20 19:47:16
                            
                                26阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            HIVE 总结 二 ,配置,tez,及常用命令和数据类型 文章目录HIVE 总结 二 ,配置,tez,及常用命令和数据类型1.MySQL最小化安装在这里插入图片描述2.Hive 安装3.安装tez引擎4.启动Hive5.常用命令6.常见属性7.hive数据类型 1.MySQL最小化安装检查系统上是否有残留的SQL,先进行卸载工作rpm -qa |grep mariadb
sudo rpm -e -            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-08-23 21:14:39
                            
                                77阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            记录一下使用docker快速搭建部署hive环境 目录写在前面步骤安装docker安装docker安装docker-compose配置docker国内镜像源(可选)安装git & 配置github部署Hivedocker-hive开始部署使用Hive命令行收尾工作安装vi、lrzsz关闭相关命令END参考链接 写在前面想练练Hive SQL,但是没有hive shell            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-05-29 21:35:40
                            
                                639阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            # 在CentOS上安装部署Apache Hive的完整指南
在大数据生态中,Apache Hive是一个用于数据分析的工具,它使得非专业的用户也能通过类SQL的语言来查询和处理存储在Hadoop中的数据。本文将指导你在CentOS上安装和部署Hive,适合刚入行的小白。
## 安装Hive的流程
下面是安装Hive的基本步骤:
| 步骤 | 描述 |
|------|------|
|            
                
         
            
            
            
            目录一、基本概念(一)Hive概念(二)优势和特点(三)Hive元数据管理(四)Hive架构(五)Hive Interface – 其他使用环境二、Hive环境搭建1.自动安装脚本2./opt/soft/hive312/conf目录下创建hive配置文件hive-site.xml3.拷贝一个jar包到hive下面的lib目录下4.删除hive的guava,拷贝hadoop下的guava5.重启环境            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-09-05 12:24:19
                            
                                313阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            ## Mysql设置 使用Mysql客户端登录 设置远程登陆权限(给root用户授予从任何机器上登陆mysql服务器的权限) mysql > grant all privileges on *.* to 'root'@'%' identified by 'password' with grant o ...            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2021-08-26 15:20:00
                            
                                168阅读
                            
                                                                                    
                                2评论
                            
                                                 
                 
                
                             
         
            
            
            
            # Presto Hive安装部署
Presto是一个高性能的分布式SQL查询引擎,可用于快速查询大数据集。在Presto中,可以通过Hive Connector连接Hive数据仓库进行查询。本文将介绍如何在集群中安装和部署Presto以及与Hive的集成。
## 步骤一:安装Presto
### 1. 下载Presto
可以在Presto官方网站下载最新版本的Presto安装包。解压下载            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2024-03-14 05:35:25
                            
                                83阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            文章目录1 Hive官方地址及安装包下载地址2 安装Hadoop集群3 Hive服务安装3.1 Hive部署模式介绍3.1.1 metadata 、metastore3.1.2 metastore配置方式3.1.3 客户端3.2 内嵌模式3.3 本地模式3.4 远程模式3.5 不同客户端方式连接hive3.6 编写自动化启动hive脚本3.7 Hive 其他命令操作4 Hive 常见属性配置4.            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-20 19:31:29
                            
                                207阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            1. Hive概述1.什么是hive?由Facebook开源用于解决海量结构化日志得数据统计;Hive是基于Hadoopde的一个数据仓库工具,可以将结构化的数据文件映射成一张表,并用提供类SQL查询功能;构建在Hadoop之上的数据仓库;使用HQL作为查询接口;使用HDFS储存;使用MapReduce计算;本质是:将HQL转化为Mapreduce程序灵活性和拓展性比较好:支持...            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2022-01-11 16:29:13
                            
                                142阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            hive on spark spark 安装配置安装对应版本scala spark和scala的版本需要匹配,不然安装后启动会报错 官网下载源码包 http://spark.apache.org/downloads.html其他版本可以去https://archive.apache.org/dist/spark/下载 解压后修改pom.xml中对应的scala、Hadoop版本 去dev/make            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-12 21:39:05
                            
                                92阅读