高可用集群虽然很有用,但是对mysql主从不是很完美
原创 2016-09-06 21:27:10
655阅读
HA实验环境server1  172.25.23.1 ricci ( 集群配置 )  客户端server2  172.25.23.2 ricci              客户端server3  172.25.23.3
原创 2016-09-11 17:30:00
685阅读
高可用高可用 high available 也称为双机热备,用户关键性业务(一台机器挂了会影响到大部分业务)有两台服务器AB,正常时A提供服务B待命,当A宕机或服务宕掉时,B继续提供服务。常用开源软件heartbeat和keepalived,其中keepalived有负载均衡的功能。心跳线:最好选择串口线或独立网卡直连此操作需要AB服务器都操作(在干净的环境操作实验) 前期准备:## 设置一下ho
HA
原创 2017-01-12 11:35:20
887阅读
HA 即 (high available)高可用,又被叫做双机热备,用于关键性业务。 简单理解就是,有两台机器A和B,正常是A提供服务,B待命闲置,当A宕机或服务宕掉,会切换至B机器继续提供服务。常用实现高可用的开源软件有heartbeat和keepalived,其中keepalived有负载均衡的功能。1、下载扩展yum源,安装wget "http://mirrors.ustc.edu.cn/f
原创 2016-06-05 12:26:00
539阅读
HA 即 (high available)高可用,又被叫做双机热备,用于关键性业务。 简单理解就是,有两台机器A和B,正常是A提供服务,B待命闲置,当A宕机或服务宕掉,会切换至B机器继续提供服务。常用实现高可用的开源软件有heartbeat和keepalived,其中keepalived有负载均衡的功能。 下面我们使用heartbeat来做HA集群,并且把nginx服务作为HA对应的服务
原创 2016-04-02 00:04:24
596阅读
HA即(high available)高可用,又叫做双机热备,用于关键性业务,简单理解就是,有两台机器A和B,正常提供服务的是A机器,B机器待命,当A机器停止服务后,会切换到B机器继续提供服务.常用实现高可用的开源软件有heartbeat和keepalived,其中keepalived有负载均衡的功能.
原创 2016-12-20 11:07:40
672阅读
改hostname主:改为master从:还未slavevip :192.168.23.110主从同事执行vim /etc/hosts192.168.23.135 master192.168.23.129 slaveyum install -y heartbeatyum install -y libnet主上拷贝模板文件cd /usr/share/doc/heartbeat-3
原创 2017-08-08 11:01:40
598阅读
HA(high available)即高可用,又被叫做双机热备,用于关键性业务。简单理解就是,有两台机器A 和B,正常是A提供服务,B待命闲置,当A宕机或服务宕掉,会切换至B机器继续提供服务。常用实现高可用的开源软件有heartbeat和keepalived,其中keepalived有负载均衡的功能。下面我们使用heartbeat来做HA集群,并且把nginx服务作为HA对应的服务。 一
原创 2015-10-06 20:05:44
883阅读
HA:high available,高可用集群。那么什么是高可用呢?有时候我们会让一个业务非常稳定的去工作,那么难免会有一个单独的这么一个非常容易出问题的故障节点存在,那我们所谓的单节点,那比如说现在去做一个非常关键的业务,比如mysql或者我们用nginx做一个负载均衡的这样一个反向代理服务器或者是邮件服务器,那么这个服务器非常的关键,他一旦坏了的话,影响范围非常的大,那所以这样的业务关键节点业
原创 2015-11-14 17:24:54
678阅读
一、Spark简介:Spark是一种与Hadoop相似的开源集群计算环境Spark基于MR算法实现的分布式计算,拥有Hadoop MR的优点,不同的是结果保存在内存中Spark是一个针对超大数据集合的低延迟的集群分布式计算系统,比MapReduce快40倍左右Spark是在 Scala 语言中实现的,它将 Scala 用作其应用程序框架Spark兼容Hadoop的API,能够读写Hadoop的HD
原创 2015-03-21 17:46:20
3955阅读
分布式集群搭建:http://blog.51cto.com/14048416/2327802 上面试spark普通的分布式集群搭建,存在master节点的单点故障问题。Hadoop2.x开始,已经使用zookeeper解决了单点故障。同样的策略,spark也利用了zookeeper解决了spark集群的单点故障问题。1.集群的规划(这里使用3台机器测试)2.具体搭建步骤:①如果已经使用,
原创 2019-01-02 10:39:21
2772阅读
HA高可用集群配置
原创 2015-07-25 20:37:36
2834阅读
作者:Neshoir    Spark是大规模数据集处理的统一分析引擎,其具备批处理、实时数据分析、图计算、机器学习等能力。Spark的特点就是计算快,其计算尽可能的都会在内存里执行,执行任务基于DAG,提供丰富的编程模型接口,如scala,java,python,Spark应用支持运行于各个主流的资源调度平台之上,如Hadoop YARN、Messos、Kubernetes等,当然Spark自身
  实验说明: 1 现在我们用两台director和两台realserver 实现集群的高可用性 2 这个实验主要通过配置文件实现 3 在上篇高可用集群的基础上进行 4结构示意图如上     Realserver的配置 1配置两个realserver的yum源 [base] name=base baseurl=ftp://192.168.0
原创 2011-09-12 23:37:42
563阅读
2点赞
1评论
HA 即 (high available)高可用,又被叫做双机热备,用于关键性业务。 简单理解就是,有两台机器A和B,正常是A提供服务,B待命闲置,当A宕机或服务宕掉,会切换至B机器继续提供服务。常用实现高可用的开源软件有heartbeat和keepalived,其中keepalived有负载均衡的功能。HA == high available主从,主宕机,从就起来。默认从上是不工作的。heart
原创 2015-11-15 22:18:46
932阅读
前言最近在搞hadoop+spark+python,所以就搭建了一个本地的hadoop环境,基础环境搭建地址hadoop2.7.7 分布式集群安装与配置  本篇博客主要说明,如果搭建spark集群并集成到hadoop安装流程安装spark需要先安装scala 注意在安装过程中需要对应spark与scala版本, spark 也要跟hadoop对应版本,具体的可以在spark官网下载页面查看下载sa
转自doublexi: Spark其实是Hadoop生态圈的一部分,需要用到Hadoop的HDFS、YARN等组件。为了方便我们的使用,Spark官方已经为我们将Hadoop与scala组件集成到spark里的安装包,解压开箱即可使用,给我们提供了很大的方便。如果我们只是本地学习的spark,又不想搭建复杂的hadoop集群,就可以使用该安装包。spark-3.2.0-bin-hadoop3.2-
一、系统环境: Redhat EL5U3,RHCS套件二、网络拓扑图三、配置过程 1、前期准备: 集群中各台主机互相使用ssh每次输入密码很麻烦,我们制作一个不需要密码的公钥拷贝到各台节点上。 Ssh-keygen 按默认的配置一路下去,不要输入密码,完成后执行更改文件名: mv ~/.ssh/id_rsa.pub ~/.ssh/authorized_keysauthriozed_keys 使用
Spark分布式集群的搭建详细图文步骤
原创 2021-07-12 16:39:13
681阅读
  • 1
  • 2
  • 3
  • 4
  • 5