一、环境 windows 7 64bit jdk 1.8 hadoop 2.7.4 下载地址：http://hadoop.apache.org/releases.html二、步骤
原创
2017-09-29 09:35:53
7007阅读
1评论
一、hadoop fs 命令1、hadoop fs –fs [local | <file system URI>]：声明hadoop使用的文件系统，如果不声明的话，使用当前配置文件配置的，按如下顺序查找：hadoop jar里的hadoop-default.xml->$HADOOP_CONF_DIR下的hadoop-default.xml->$HADOOP_CONF_DIR
转载
2023-05-30 14:35:58
62阅读
Hadoop2.7.4完全分布式集群构建
原创
2018-12-14 19:10:01
656阅读
环境说明：[root@hadp-master sbin]# hadoop versionHadoop 2.7.4 一、 脚本封装全部一起启动、关闭1.1 启动[root@hadp-master sbin]# ./start-all.sh This script is Deprecated. Inst
转载
2017-08-27 21:44:00
66阅读
2评论
1.protobuf编译安装[root@hadoop1 ~]# yum install svn autoconf automake libtool cmake ncurses-devel openssl-devel gcc*
[root@hadoop1 ~]# tar&
原创
2017-08-28 18:08:11
1177阅读
点赞
本文主要描述Sqoop1.4.6的安装配置以及使用。一、安装配置1、Sqoop安装[hadoop@hdp01~]$wgethttp://mirror.bit.edu.cn/apache/sqoop/1.4.6/sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz[hadoop@hdp01~]$tar-xzfsqoop-1.4.6.bin__hadoop-2.0.4-
原创
2017-12-28 16:42:54
4564阅读
求$yz$面上二次曲线\begin{equation} \begin{cases} \frac{y^2}{a^2}=2z\\x=0\\ \end{cases}\end{equation}绕$z$轴旋转所得的二次曲面的方程.解：对于二次曲面上的任意点$p=(x,y,z)$.都存在相应的二次曲面上的...
转载
2012-08-12 23:11:00
50阅读
2评论
1 安装jdk1.8和环境准备[必选]1.1 下载安装jdk1.1.1 下载jdk下载jdk1.8版本点击下载jdk1.8下载其他版本点击进入oracle官网如果提示需要登录，则输入以下账号密码账号密码来源于网络(2019.7.18)：账号：liwei@xiaostudy.com密码：OracleTest12341.1.2 安装jdk上传到linux的/opt/myinstall/目录下解压tar
转载
2023-11-08 20:47:24
1153阅读
首先: 参考 ://blog..net/zhang1234556/article/details/77621487 搭建好hadoop集群。 然后，在master节点安装pig。 我们用MapReduce进行数据分析。当业务比较复杂的时候，使用MapReduce将会是一个很复杂的
转载
2018-01-28 21:18:00
318阅读
2评论
求$yz$面上二次曲线\begin{equation} \begin{cases} \frac{y^2}{a^2}=2z\\x=0\\ \end{cases}\end{equation}绕$z$轴旋转所得的二次曲面的方程.解：对于二次曲面上的任意点$p=(x,y,z)$.都存在相应的二次曲面上的...
转载
2012-08-12 23:11:00
50阅读
2评论
一、 相关概念 Hive Metastore有三种配置方式，分别是： Embedded Metastore Database (Derby) 内嵌模式Local Metastore Server 本地元存储Remote Metastore Server 远程元存储1.1 Metadata、Metas
转载
2017-09-17 20:25:00
310阅读
2评论
# 实现“bde2020/hadoop-datanode:2.0.0-hadoop2.7.4-java8”镜像的步骤
## 1. 确认环境
在开始之前，确保你已经具备以下环境：
- Docker已经安装并配置好
- 有基本的Docker知识
## 2. 拉取镜像
首先我们需要拉取hadoop-datanode镜像，版本为2.0.0-hadoop2.7.4-java8，使用以下命令：
```ma
原创
2023-09-09 14:24:35
351阅读
前言教程所用各版本说明一 JDK环境配置由于项目用的JDK17，所以单独给Hadoop配了JDK11，建议直接配置JAVA_HOME环境变量为JDK11，因为后面Spark需要用到JAVA_HOME目前Hadoop和Spark兼容JDK11和JDK8单独修改Hadoop的话，需要在Hadoop目录下的etc\hadoop\文件夹中hadoop-env.cmd中添加一行set JAVA_HOME=E
转载
2023-11-07 01:05:49
2468阅读
一、概述本次实验采用VMware虚拟机，linux版本为CentOS7；因为实验所需的5台机器配置大多相同，所以采用配置其中一台，然后使用克隆功能复制另外4份再做具体修改；其中有些步骤以前配置过，此处就说明一下不再做具体配置，具体配置可翻阅以前的博文。二、实验环境1.关闭selinux和firewall2.hadoop-2.7.4.tar.gz；zookeeper-3.4.10.tar.gz；jd
原创
2017-08-30 11:31:53
3134阅读
点赞
jdk、hadoop安装，hadoop集群配置一、jdk安装下载lrzsz包 进入到software目录，并且输入命令rz选择jdk文件点击Add -> OK，等待下载完成将jdk压缩包解压到/export/servers目录下解压错目录，重新修改成/root/export/servers/目录下修改jdk文件夹名称修改/etc/profile文件在最后一行输入以下语句查看目录检验
转载
2023-07-30 12:41:14
157阅读
Hadoop 伪分布式的搭建（五）——JDK的安装和环境变量的配置在运行Hadoop时需要Java，所以我们要安装Java的开发环境（JDK）,在这里选择Java8版本安装hadoop环境，另外目前大多数CentOS 系统都会选择64位的版本，所以jdk也需要选择与相匹配的64位的版本。首先，先创建jdk的安装目录：/home/hadoop/app，具体操作如下： 可以到官网或者一些其他的资源网站
转载
2023-05-24 14:23:21
242阅读
3. Hadoop集群搭建3.1 安装JDK如果Linux中有自带的JDK一定要先卸载，参考配置模板机中卸载原始JDK的操作。卸载完成后再进行安装，安装JDK需要使用远程传输工具将安装包上传到Linux系统中，具体安装流程如下：用远程传输工具将JDK导入到opt目录下面的software文件夹下面。 上传完成后可以在/opt/software/目录中查看到jdk的详细情况解压JDK到/opt/mo
转载
2023-09-11 21:35:55
6阅读
1、首先必需安装虚拟机centos，和xftp5,xftp选择 sftp协议，22端口，选项中选择utf-8编码2、解目录 cp jdk-8u66-li...
原创
2021-11-12 17:13:31
156阅读
一、JDK安装1、用SecureCRT的FX工具将jdk导入到opt目录下面的software文件夹下面 2、在linux系统下的opt目录中查看软件包是否导入成功 [atguigu@hadoop101 opt]$ cd software/ 3、解压jdk到/opt/module目录下 [atguigu@hadoop101 software]$ ...
原创
2022-05-16 09:11:24
662阅读
# 系统信息3台 系统： centos6.8 内核：4 内存：4G 硬盘：50G# 主机名称，ip地址master: 10.200.201.110slave1: 10.200.201.111slave2: 10.200.201.112######################## 基础初始配置 ################
原创
精选
2017-12-04 16:46:14
10000+阅读
点赞
7评论
