HBase安装http://hbase.apache.org/ HBase的安装也有三种模式:单机模式、伪分布模式和完全分布式模式,在这里只介绍完全分布模式。前提是Hadoop集群和Zookeeper已经安装完毕,并能正确运行。 第一步:下载安装包,解压到合适位置,并将权限分配给hadoop用户(运行hadoop的账户)这里下载的是hbase-0.94.6,Hadoop集群...            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2023-05-10 20:52:58
                            
                                116阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            硬件环境:四台虚拟机,hadoop1~hadoop4,3G内存,60G硬盘,2核CPU软件环境:CentOS6.5,hadoop-2.6.0-cdh5.8.2,JDK1.7部署规划:hadoop1(192.168.0.3):namenode(active)、resourcemanagerhadoop2(192.168.0.4):namenode(standby)、journalnode、datan            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2017-03-05 15:47:51
                            
                                1286阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            一:单机版1.sudo gedit ~/.bashrc 加入JDK路径#HADOOP VARIABLES START export JAVA_HOME=/usr/lib/jvm/java-1.7.0-openjdk-amd64export HADOOP_INSTALL=/home/sendi/ha...            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2021-09-04 10:52:32
                            
                                168阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            因为需要部署spark环境,特意重新安装了一个测试的hadoop集群,现将相关步骤记录如下:硬件环境:四台虚拟机,hadoop1~hadoop4,3G内存,60G硬盘,2核CPU软件环境:CentOS6.5,hadoop-2.6.0-cdh5.8.2,JDK1.7部署规划:hadoop1(192.168.0.3):namenode(active)、resourcemanagerhadoop2(19            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2016-12-25 14:45:49
                            
                                3311阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            在Linux操作系统上安装Hadoop2.6是一个常见的操作,Hadoop是一个用于大规模数据处理和分布式存储的开源框架。通过安装Hadoop2.6,用户可以充分利用集群的计算和存储资源,实现高效的数据处理和分析。
首先,为了在Linux上安装Hadoop2.6,用户需要确保已经安装了Java环境。Hadoop是用Java编写的,因此Java环境是必需的。用户可以通过在终端输入java -ver            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2024-05-28 10:35:37
                            
                                69阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            Linux系统作为开源领域的一颗璀璨明珠,一直受到开发者们的喜爱和推崇。而在Linux系统中,有一个备受关注的概念,那就是“红帽(Red Hat)”。红帽公司成立于1993年,总部位于美国北卡罗来纳州的罗利市,是一家专注于Linux领域的软件公司,也是全球领先的开源解决方案提供商。
红帽公司通过其领先的Linux发行版Red Hat Enterprise Linux(RHEL)在企业应用领域取得            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2024-04-09 10:38:29
                            
                                57阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            1.配置      我的搭建环境是 个人笔记本(deepin linux)+ VirtualBox (            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2023-02-22 11:16:21
                            
                                162阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            目录一:版本介绍LINUX版本:centos6.5   64位版本(虚拟机三台机器,一主两从)168.37.101168.37.102168.37.103hadoop版本:2.7.7版本
JAVA版本:1.8.0二:SSH免密1、编辑hosts在root用户下输入命令,vi /etc/hosts,用vi编辑hosts文件,如下:2、生成authorized_keys文件登录centos01,在.            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2022-01-03 15:54:06
                            
                                766阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            一、环境说明 1、虚拟机平台:VMware10 2、Linux版本号:ubuntu-12.04.3-desktop-i386 3、JDK:jdk1.7.0_51 4、Hadoop版本号:2.2.0 5、集群节点:3个,各自是hadoopMaster。hadoopSlave1。hadoopSlave2            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2017-05-08 14:03:00
                            
                                220阅读
                            
                                                                                    
                                2评论
                            
                                                 
                 
                
                             
         
            
            
            
            软件包下载http://mirrors.hust.edu.cn/apache/hadoop/common/Hadoop是什么Hadoop是Lucene创始人Doug Cutting,根据Google的相关内容山寨出来的分布式文件系统和对海量数据进行分析计算的基础框架系统,其中包含MapReduce程序,hdfs系统等。网方网站:http://hadoop.apache.org/Hadoop是一个由            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2021-03-09 16:19:54
                            
                                250阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            "hadoop"的身份进行。一、Master上安装hadoop  解压hadoop安装包    删除安装文件   rm hadoop-2.6.0.tar.gz  修改配置文件:一共有7个文件要修改  $HADOOP_HOME/etc/hadoop/hadoop-env.sh  $HADOOP_HOME/etc/hadoop/yarn-env.sh  $HADOOP_HOME/e            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-11 22:33:13
                            
                                69阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            hadoop3.3.0 集群搭建详细教程
 先准备好:hadoop3.3.0secureCRT提取码:u3cdjdk官网centos7一、模板机1、虚拟机的网络适配器选择NAT2、关闭centos的防火墙systemctl stop firewalld
systemctl disable firewalld.service3、将centos设置为自动连接网络在设置中,找到网络,把有线设置为自动连接            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-01-29 19:51:56
                            
                                67阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            1.开始   个人配置 : 笔记本(deepin linux ) + vritualBox ( ubuntu ) x 3   说明 : 一定要看 !!!     在上篇  hadoop - hadoop2.6 分布式 - 集群环境搭建 -            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2023-05-07 15:55:37
                            
                                126阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            一、 Hadoop的分布式模型 Hadoop通常有三种运行模式:本地(独立)模式、伪分布式(Pseudo-distributed)模式和完全            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2024-09-26 11:59:59
                            
                                149阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            环境准备我使用的是vmware workstation,首先安装ubuntu 12.04,安装完成后通过vmware的clone             
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2022-03-29 14:31:15
                            
                                61阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            1.前言本文档适用于Hadoop3.x版本分布式测试集群搭建。HDFS组件包括:NameNode、DataNode、SecondaryNameNodeYarn组件包括:ResourceManager、NodeManagerMapReduce组件包括:JobHistoryServer2. 集群搭建前提条件关闭防火墙确保集群主机节点时间同步(可以安装ntp服务保持集群时间同步)集群间配好免密,包括免密            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-09-14 14:00:28
                            
                                86阅读
                            
                                                                             
                 
                
                                
                    