https://www.cloudera.com/documentation/manager/5-0-x/Cloudera            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2022-06-17 22:47:56
                            
                                275阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            # 在 Ubuntu 上安装 MySQL 集群
MySQL 是一个流行的关系型数据库管理系统,用于存储和管理大量的结构化数据。在某些情况下,单个 MySQL 服务器可能无法满足高负载和高可用性的要求。为了解决这个问题,可以安装一个 MySQL 集群,将负载分散到多个服务器上。
本文将介绍在 Ubuntu 系统上安装 MySQL 集群的步骤。我们将使用 Percona XtraDB Cluste            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2023-07-20 21:53:03
                            
                                310阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            1、集成目标核心:将集成服务的源码整合到 ambari-server rpm 包中1.1、集成目标核心:能在客户方进行一键部署 通常,我们在自定义服务集成开发中,会将集成服务的代码项目放置到 /var/lib/ambari-server/resources/stacks/HDP/<version>/services/ 目录下。这样子的前提就是 ambari 与 hdp 集群必须提前搭建            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-04-08 10:00:54
                            
                                41阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            一、CM 概述及架构1. CM概述cloudera managerment 简称,是由cloudera公司开源 ,对以Hadoop为基础的生态圈框架所组件的集成的分布式的自动化安装部署集群,并且会对安装部署后的集群的资源信息、框架的服务运作状态进行实时监控及报警的平台软件。CM框架只能安装cdh版本的大数据框架,Apache版本的Hadoop可以使用ambari框架进行安装及监控工作2.CDH版本            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-05-10 19:56:09
                            
                                95阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            文章目录CM的安装部署CM安装:修改CM Agent配置配置CM的数据库使用CM自带的脚本,在MySQL中创建CM库分发cm创建Parcel-repo服务节点启动集群中的机器工作节点全部启动CM的安装部署CM下载地址: http://archive.cloudera.com/cm5/cm/5/离线库下载地址: http://archive.cloudera.com/cdh5/parcels...            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2021-06-05 23:44:28
                            
                                544阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            文章目录CM的安装部署CM安装:修改CM Agent配置配置CM的数据库使用CM自带的脚本,在MySQL中创建CM库分发cm创建Parcel-repo服务节点启动集群中的机器工作节点全部启动CM的安装部署CM下载地址: http://archive.cloudera.com/cm5/cm/5/            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2022-02-18 10:02:42
                            
                                325阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            # CDH CM 启动连接不上 MySQL 的解决方法
在大数据开发中,Cloudera 的 CDH(Cloudera Distribution Including Apache Hadoop)是一个非常流行的工具。而 CM(Cloudera Manager)则是管理 CDH 的界面。当我们在启动 CDH 服务时,可能会遇到连接不上 MySQL 的问题。这篇文章将引导你一步步排查并解决这个问题。            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2024-08-01 10:33:58
                            
                                328阅读
                            
                                                                             
                 
                
                             
         
            
            
            
              此篇为大家带来的是CM集群安装。目录一. 提前准备1.1 下载第三方依赖1.2 创建CM用的数据库二. CM安装部署2.1 解压cloudera-manager-el6-cm5.12.1_x86_64.tar.gz2.2 创建用户cloudera-scm(所有节点)2.3 配置CM Agent2.4 配置CM的数据库2.5 分发cloudera-manager2.            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2022-04-20 15:59:52
                            
                                655阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
              此篇为大家带来的是CM集群安装。目录一. 提前准备1.1 下载第三方依赖1.2 创建CM用的数据库二. CM安装部署2.1 解压cloudera-manager-el6-cm5.12.1_x86_64.tar.gz2.2 创建用户cloudera-scm(所有节点)2.3 配置CM Agent2.4 配置CM的数据库2.5 分发cloudera-manager            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2021-09-03 14:05:25
                            
                                453阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            CM接管未受管的CDH集群            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2022-09-11 00:01:28
                            
                                74阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            将RPM的CDH迁移到Parcel            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2022-09-11 00:01:26
                            
                                113阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            CM接管未受管的CDH集群            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2022-09-11 00:01:28
                            
                                79阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            【Apache】Hadoop 3.2.1集群搭建系列文章传送门前言参考资料1.集群规划2.基础系统环境准备(三个节点都进行配置)2.1 关闭防火墙服务2.2 配置ntp和时间2.3 关闭 NetworkManager 服务和selinux2.4 配置 /etc/hosts 文件2.5 安装必要软件(通过 yum 在线安装)2.6 创建用户和组以及配置各自的ssh免密登录2.7 xsync 集群分            
                
         
            
            
            
            目录集群状态集群状态 查看集群状态 ceph health detailceph -s关闭自动重平衡 ceph osd set noout恢复自动重平衡 ceph osd unset noout查看集群策略 ceph osd crush rule lsceph osd crush rule dump replicated_rulejson格式输出 ceph -s -f json查看配置 ceph            
                
         
            
            
            
            ## 如何在 CM 上安装 Spark
### 1. 整体流程
首先,让我们来看一下在 Cloudera Manager (CM) 上安装 Spark 的整体流程。下表展示了所有需要执行的步骤:
| 步骤 | 描述 |
| --- | --- |
| 1 | 在 CM 上创建一个新的集群 |
| 2 | 选择要在集群上安装的服务 |
| 3 | 配置并分配主机给每个服务 |
| 4 | 安装            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2023-07-22 00:23:50
                            
                                69阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            # 安装Hadoop
## 介绍
Apache Hadoop是一个开源的分布式计算平台,用于处理大规模数据集的存储和分析。它基于Google的MapReduce和分布式文件系统(HDFS),可以在廉价的硬件上运行,并能够处理上百个节点上的数千个任务。
在本文中,我们将学习如何在CentOS上安装Hadoop,并进行一些基本配置。
## 环境准备
在开始安装Hadoop之前,我们需要准备一            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2023-11-10 15:04:08
                            
                                25阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            MHA(Master HighAvailability)目前在MySQL高可用方面是一个相对成熟的解决方案,是一套优秀的作为MySQL高可用性环境下故障切换和主从提升的高可用软件。在MySQL故障切换过程中,MHA能做到在0~30秒之内自动完成数据库的故障切换操作,并且在进行故障切换的过程中,MHA能在最大程度上保证数据的一致性,以达到真正意义上的高可用。 目前MHA主要支持一主多从的架构。要搭建            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-05-31 13:20:35
                            
                                50阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            # 如何在cm上启动yarn失败的解决方案
作为一名经验丰富的开发者,我将向你介绍如何在cm上启动yarn失败的解决方案。首先让我们来看一下整个流程,然后逐步指导你如何操作。
## 流程
以下是在cm上启动yarn失败的解决方案的步骤:
```mermaid
pie
title 步骤
"Step 1" : 检查配置文件
"Step 2" : 检查端口是否被占用
"Step 3" : 检查日            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2024-03-05 06:53:42
                            
                                39阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            在集群上安装 Python 是一个常见的需求,尤其是在需要进行大数据处理或机器学习时。本文将详细介绍如何在集群环境中安装和配置 Python,包括所需的软硬件要求、安装步骤、配置选项、性能测试和优化技巧,力求使这个过程简单易懂。
### 环境准备
在安装 Python 之前,确保你的集群符合以下软硬件要求:
| 组件        | 最低要求               | 推荐要求            
                
         
            
            
            
            ZooKeeper是一个分布式开源框架,提供了协调分布式应用的基本服务,它向外部应用暴露一组通用服务——分布式同步(Distributed Synchronization)、命名服务(Naming Service)、集群维护(Group Maintenance)等,简化分布式应用协调及其管理的难度,提供高性能的分布式服务。ZooKeeper本身可以以Standalone模式安装运行,不过它的长处在