下面给出的是spark集群搭建的环境:操作系统:最小安装的CentOS 7(下载地址)Yarn对应的hadoop版本号:Hadoop的Cloudera公司发行版Hadoop2.6.0-CDH5.4.0(下载地址)Java版本号:JDK1.8(下载地址)Scala版本号:Scala2.10.4(下载地址)Spark版本号:spark-1.3.1-bin-hadoop2.6(下载地址)集群组成:mas
当Hadoop集群的某单个节点出现问题时,一般不必重启整个系统,只须重启这个节点,它会自动连入整个集群。 在坏死的节点上输入如下命令即可:hadoop-daemon.sh start datanodehadoop-daemon.sh start secondarynamenode 案例如下:hadoop节点死机,能ping通,ssh连接不上案例:时间:2014/9/11 上午表
Copyright © 2005-2024 51CTO.COM 版权所有 京ICP证060544号