一:hive安装部署 1.把apache-hive-1.2.1-bin.tar.gz上传到linux的/opt/software目录下(可根据自己目录来,下同)2.解压apache-hive-1.2.1-bin.tar.gz到/opt/module/目录下面tar -zxvf apache-hive-1.2.1-bin.tar.gz -C /opt/module/3.在mudule目录下修改ap
转载 2023-07-14 11:10:36
89阅读
Hive简介(数据仓库工具)hive是基于Hadoop的一个数据仓库工具,用来进行数据提取、转化、加载,这是一种可以存储、查询和分析存储在Hadoop中的大规模数据的机制。hive数据仓库工具能将结构化的数据文件映射为一张数据库表,并提供SQL查询功能,能将SQL语句转变成MapReduce任务来执行。Hive的优点是学习成本低,可以通过类似SQL语句实现快速MapReduce统计,使MapRed
转载 2024-06-07 10:01:33
27阅读
近日,在腾讯云和阿里云购买了服务器,尝试搭建大数据环境。在腾讯云选择了安装64位的Centos7.0系统,阿里云选择了安装64位的Wndows  Server2012系统。由于服务器数量的原因,hadoop采取了伪分布式部署模式。Hive有三种安装方式:嵌入模式,本地模式和远程模式。本地模式只是在下面配置的hive-site.xml中,把连接mysql的url中的ip改成localh
@TOC<hr style=" border:solid; width:100px; height:1px;" color=#000000 size=1">前言<font color=#999AAA >为了后续更好的学习hive数仓,这里先附上Hive安装部署的教程。后续文章会详细讲解hive的原理和使用。安装Hive的前置条件是: 1.安装好对应版本的hadoop集群,并
转载 2021-03-10 19:37:07
161阅读
hive安装部署 浪尖 浪尖聊大数据 1、 准备环境1, 软件准备Java-- jdk-8u121-linux-x64.tar.gzHadoop--hadoop-2.7.4.tar.gz (jdk1.7会报错)Hive-- apache-hive-1.2.1-bin.tar.gz本系列教程所有jar包,请关注微信公众号 :Spark高级玩法,输入software获取。Centos 6.5是本文采用
原创 2021-03-17 13:28:44
264阅读
# Hive安装部署 Hive是基于Hadoop和HiveQL的数据仓库基础设施,它提供了类似于SQL的查询语言HiveQL,可以对存储在Hadoop集群中的数据进行分析和查询。本文将详细介绍如何安装部署Hive,并提供一些代码示例帮助读者更好地理解。 ## 安装Hive 首先,确保你已经成功安装了Hadoop集群。接下来,按照以下步骤安装Hive: 1. 下载Hive安装包,并解压缩到
原创 2023-08-22 05:21:48
14阅读
1、 准备环境   1, 软件准备 Java-- jdk-8u121-linux-x64.tar.gz Hadoop--hadoop-2.7.4.tar.gz (jdk1.7会报错) Hive-- apache-hive-1.2.1-bin.tar.gz 本系列教程所有jar包,请关注微信公众号 :Spark高级玩法,输入software获取。 Centos 6.5是本文采用的操作系统 2, 安装
原创 2021-07-27 11:10:56
156阅读
------------------------------本案例hivemysql安装在同一台服务器上-----------------
原创 2021-08-07 10:45:06
175阅读
4.1 Linux系统软件安装方式Linux上的软件安装有以下几种常见方式:1、二进制发布包软件已经针对具体平台编译打包发布,只要解压,修改配置即可 2、RPM发布包软件已经按照redhat的包管理工具规范RPM进行打包发布,需要获取到相应的软件RPM发布包,然后用RPM命令进行安装 3、Yum在线安装软件已经以RPM规范打包,但发布在了网络上的一些服务器上,可用yum在线安装
QQ交流群:335671559,欢迎交流 环境准备 Linux系统 hadoop安装完毕,正常执行,hadoop版本号为1.x或者2.x都能够 hive安装包 1.Hive安装 Hive安装配置还是比較简单得。 首先,到Apache下载Hive,本次安装使用的Hive版本号为hive-0.13.0。      其次,下载完毕后,将hive解压到想要安装的文件夹下。 tar
转载 2017-04-25 11:29:00
133阅读
2评论
在此强调:Hadoop,zookpeer,spark,kafka,mysql已经正常启动一、开始安装部署hive基础依赖环境: 1,jdk   1.6+ 2, hadoop 2.x 3,hive 0.13-0.19 4,mysql   (mysql-connector-jar)安装详细如下:#java export JAVA_HOME=/soft/jdk1.7.0_79/
转载 2023-07-20 19:47:16
26阅读
HIVE 总结 二 ,配置,tez,及常用命令和数据类型 文章目录HIVE 总结 二 ,配置,tez,及常用命令和数据类型1.MySQL最小化安装在这里插入图片描述2.Hive 安装3.安装tez引擎4.启动Hive5.常用命令6.常见属性7.hive数据类型 1.MySQL最小化安装检查系统上是否有残留的SQL,先进行卸载工作rpm -qa |grep mariadb sudo rpm -e -
转载 2023-08-23 21:14:39
77阅读
记录一下使用docker快速搭建部署hive环境 目录写在前面步骤安装docker安装docker安装docker-compose配置docker国内镜像源(可选)安装git & 配置github部署Hivedocker-hive开始部署使用Hive命令行收尾工作安装vi、lrzsz关闭相关命令END参考链接 写在前面想练练Hive SQL,但是没有hive shell
转载 2024-05-29 21:35:40
639阅读
# 在CentOS上安装部署Apache Hive的完整指南 在大数据生态中,Apache Hive是一个用于数据分析的工具,它使得非专业的用户也能通过类SQL的语言来查询和处理存储在Hadoop中的数据。本文将指导你在CentOS上安装部署Hive,适合刚入行的小白。 ## 安装Hive的流程 下面是安装Hive的基本步骤: | 步骤 | 描述 | |------|------| |
原创 10月前
92阅读
目录一、基本概念(一)Hive概念(二)优势和特点(三)Hive元数据管理(四)Hive架构(五)Hive Interface – 其他使用环境二、Hive环境搭建1.自动安装脚本2./opt/soft/hive312/conf目录下创建hive配置文件hive-site.xml3.拷贝一个jar包到hive下面的lib目录下4.删除hive的guava,拷贝hadoop下的guava5.重启环境
转载 2023-09-05 12:24:19
313阅读
## Mysql设置 使用Mysql客户端登录 设置远程登陆权限(给root用户授予从任何机器上登陆mysql服务器的权限) mysql > grant all privileges on *.* to 'root'@'%' identified by 'password' with grant o ...
转载 2021-08-26 15:20:00
168阅读
2评论
# Presto Hive安装部署 Presto是一个高性能的分布式SQL查询引擎,可用于快速查询大数据集。在Presto中,可以通过Hive Connector连接Hive数据仓库进行查询。本文将介绍如何在集群中安装部署Presto以及与Hive的集成。 ## 步骤一:安装Presto ### 1. 下载Presto 可以在Presto官方网站下载最新版本的Presto安装包。解压下载
原创 2024-03-14 05:35:25
83阅读
文章目录1 Hive官方地址及安装包下载地址2 安装Hadoop集群3 Hive服务安装3.1 Hive部署模式介绍3.1.1 metadata 、metastore3.1.2 metastore配置方式3.1.3 客户端3.2 内嵌模式3.3 本地模式3.4 远程模式3.5 不同客户端方式连接hive3.6 编写自动化启动hive脚本3.7 Hive 其他命令操作4 Hive 常见属性配置4.
1. Hive概述1.什么是hive?由Facebook开源用于解决海量结构化日志得数据统计;Hive是基于Hadoopde的一个数据仓库工具,可以将结构化的数据文件映射成一张表,并用提供类SQL查询功能;构建在Hadoop之上的数据仓库;使用HQL作为查询接口;使用HDFS储存;使用MapReduce计算;本质是:将HQL转化为Mapreduce程序灵活性和拓展性比较好:支持...
原创 2022-01-11 16:29:13
142阅读
hive on spark spark 安装配置安装对应版本scala spark和scala的版本需要匹配,不然安装后启动会报错 官网下载源码包 http://spark.apache.org/downloads.html其他版本可以去https://archive.apache.org/dist/spark/下载 解压后修改pom.xml中对应的scala、Hadoop版本 去dev/make
转载 2023-07-12 21:39:05
92阅读
  • 1
  • 2
  • 3
  • 4
  • 5