项目GitHub地址:https://github.com/heibaiying/BigData-Notes前言大数据技术栈思维导图大数据常用软件安装指南一、Hadoop分布式文件存储系统——HDFS分布式计算框架——MapReduce集群资源管理器——YARNHadoop单机伪集群环境搭建Hadoop集群环境搭建HDFS常用Shell命令HDFSJavaAPI的使用基于Zookeeper搭建Ha
一、高可用简介Hadoop高可用(HighAvailability)分为HDFS高可用和YARN高可用,两者的实现基本类似,但HDFSNameNode对数据存储及其一致性的要求比YARNResourceManger高得多,所以它的实现也更加复杂,故下面先进行讲解:1.1高可用整体架构HDFS高可用架构如下:图片引用自:https://www.edureka.co/blog/how-to-set-u
Copyright © 2005-2024 51CTO.COM 版权所有 京ICP证060544号