目录一、Hive 简介1、什么是 Hive2、为什么使用 Hive3、Hive 的特点4、Hive 的架构二、Hive 安装1、MySQL 安装(datanode01)2、MySQL 启动3、Hive 下载安装4、配置 Hive 环境变量三、Hive 配置1、配置 metastore(datanode01)2、配置 jdbc(datanode01)3、备份template配置文件(namenode
转载
2023-07-11 22:36:22
63阅读
hadoop是一个适合大数据处理的分布式的存储以及计算平台，我个人感觉称他为平台是 非常贴切的，因为不管是hive、hbase等这类产品都是需要依赖hadoop的两个核心hdfs和mapreduce。hdfs和mapreduce是hadoop平台的基础核心，其中hdfs是负责大数据的分布式存储，而mapreduce是
转载
2023-07-12 18:05:35
62阅读
一、单机模式下Hadoop的安装1.1在VMware虚拟机中安装Ubuntu18操作系统（此处提前完成） 1.2Java安装首先使用sudo su进入root权限，再分别执行： apt-get install openjdk-8-jre apt-get install openjdk-8-jdk安装Java，安装openjdk-8-j
转载
2023-09-01 08:27:48
54阅读
这几天我尝试了hadoop+spark+hive+mysql集成方案：1. Hadoop: 提供HDFS服务2. Spark: 实现map-reduce分析算法3. Hive提供Spa
转载
2023-09-20 06:35:03
63阅读
Hadoop学习笔记(2) ——解读Hello World 上一章中，我们把hadoop下载、安装、运行起来，最后还执行了一个Hello world程序，看到了结果。现在我们就来解读一下这个Hello Word。 OK，我们先来看一下当时在命令行里输入的内容： 1. $mkdir input
2. $cd input
3. $echo "hello world">test1
转载
2023-07-12 13:39:04
68阅读
1.修改环境变量 ~/bash_profileexport ANDROID_HOME=/usr/local/Cellar/hado...
原创
2022-08-08 23:23:09
34阅读
1.hive实现wordcont例子创建表create table t_word_count_data(line string);导入本地数据（也可以导入hdfs上数(此时不需要加local)据如：/user/root/input/wc_data）load data local inpath '/lost+found/wc_data' overwrite into table t_word_cou
原创
精选
2022-10-26 08:57:46
267阅读
首先声明，以下的所有配置都是基于VMWare Fusion搭建，倘如没下载此软件，请自行下载。第一步 环境准备 此时，我已经默认你有了一台虚拟机了（如果没有，请自行下载）。在启动第一台虚拟机的时候，这个时候，你的虚拟机是无法ping通外网的，因为没和mac网关相关联。首先，查看你的mac网关ip和子网掩码。使用command+空格输入ter显示出终端操作界面，输入如下指令即可（这时，请不要关闭终端
操作系统：本人的操作系统为CentOS7.8，软件安装包路径为 /data ， 软件安装路径为 /apps ，环境搭建过程中路径请做相应改动 准备工作：一、下载软件安装包(附官下载地址)：1、jdk-8u231-linux-x64.tar.gz （hadoop 3.1.3 需要的java版本为 jdk 1.8）https://www.oracle.com/technetwork/java
转载
2023-10-16 13:06:05
116阅读
hadoop jar可以看做是java -jar的升级，可以和它一样带参数，程序一样的解析不同的是hadoop jar运行的jar包他会依赖于hadoop安装目录下面的一些环境，并且你jar包里指定了依赖了别的版本的jar包，hadoop jar会优先跑到他自己的share/hadoop/*目录下面去使用类，有的情况如果出现冲突，里面版本低于使用的，可以把hadoop里面相应的jar包删除，但是有
转载
2023-06-13 10:28:49
40阅读
1、下载整个Hadoop是基于Java开发的，所以要开发Hadoop相应的程序就得用java方便进入网站：http://archive.eclipse.org/eclipse/downloads/选择3.71 eclipse SDKhttp://archive.eclipse.org/eclipse/downloads/drops/R-3.7.1-201109091335/#EclipseSDK
转载
2023-07-25 18:32:37
221阅读
# Hadoop Java 例子
## 简介
Hadoop是一个开源的分布式计算框架，它可以处理大规模数据集，并且具有高容错性和可扩展性。Java是Hadoop最主要的编程语言。本文将介绍Hadoop Java编程的基本概念，并提供一些示例代码来帮助读者更好地理解。
## Hadoop基础知识
在开始编写Hadoop Java程序之前，我们需要了解一些Hadoop的基础知识。
### M
原创
2023-08-09 05:15:53
62阅读
Hive介绍Hadoop开发存在的问题只能用java语言开发，如果是c语言或其他语言的程序员用Hadoop，存 在语言门槛。 需要对Hadoop底层原理，api比较了解才能做开发。Hive概述Hive是基于Hadoop的一个数据仓库工具。可以将结构化的数据文件映射为 一张表，并提供完整的sql查询功能，可以将 sql语句转换为 MapReduce任 务进行运行。其优点是学习成本低，可以通过类 SQ
转载
2023-07-13 16:35:38
99阅读
# 如何实现Hive Table 例子
## 概述
欢迎来到Hive Table的世界！在本文中，我将向你展示如何创建Hive表以及如何向表中插入数据。作为一名经验丰富的开发者，我将为你提供详细的步骤和代码示例。让我们开始吧！
## 整体流程
首先，让我们看一下创建Hive表的整体流程：
| 步骤 | 描述 |
| --- | --- |
| 1 | 连接到Hive |
| 2 | 创建数据
## MAC上的Hadoop安装及使用指南
Hadoop是一个用于处理大规模数据集的分布式计算框架。它被设计成能够在一组计算机上同时处理大量数据，并能够容错和高效处理。本文将介绍如何在MAC上安装和使用Hadoop，并提供一些示例代码来演示其基本用法。
### 安装Java环境
首先，您需要确保您的MAC上已经安装了Java环境。您可以通过打开终端并运行以下命令来检查是否安装了Java：
原创
2023-10-29 04:59:07
18阅读
默认 JAVA 已安装成功第一步：安装 HomeBrew ，HomeBrew 官网：https://brew.sh/
打开 Mac 终端，复制下面的话并回车/usr/bin/ruby -e "$(curl -fsSL https://raw.githubusercontent.com/Homebrew/install/master/install)"第二步：配置SSH为了确保在远程管理 Hadoo
转载
2023-07-24 09:00:11
67阅读
今天从一朋友那里看到一本书，就是hadoop，感觉还不错，准备着手去做，贵在尝试。哈哈。有愿意一道和我做这块的朋友可以留言。
原创
2015-05-18 12:53:06
499阅读
开始学习Hadoop
转载
精选
2016-05-16 12:50:19
326阅读
# Hive入门例子实现教程
## 概述
在这篇文章中，我将教会你如何实现Hive入门例子。首先，我会列出整个实现流程的步骤，然后针对每一步告诉你需要做什么，提供相应的代码和注释。
## 实现流程
下面是实现“Hive入门例子”的步骤：
| 步骤 | 操作 |
| --- | --- |
| 1 | 创建Hive表 |
| 2 | 插入数据 |
| 3 | 查询数据 |
## 操作步骤
一、什么是Hive？1、Hive是一个翻译器，SQL ---> Hive引擎 ---> MR程序2、Hive是构建在HDFS上的一个数据仓库（Data Warehouse） Hive &nb
转载
2023-08-22 19:31:41
33阅读
