从这篇开始记录一下集群迁移的事情早先因为机房没地方,就已经开始规划集群搬机房的事情,最近终于开始动手了,我会把这次不停机迁移的过程遇到的主要问题和矛盾以及各种解决方法记录下来。集群规模说大不大,几百台,总容量30PB左右。Hadoop使用CDH 5.5.1加一些自定义patch的rpm打包编译版本。总的方案是集群不停机,在两个机房之间架设专线,旧机房decommission,拉到新机房recomm            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-12-02 20:56:59
                            
                                94阅读
                            
                                                                             
                 
                
                             
         
            
            
            
                    本篇博客只是自己实践过程中的一个记录  1   redis-cluster架构图     架构细节:        1、上图中每一个蓝色的圈都代表着一个redis的服务器节点。它们任何两个节点之间都是相互连通的。        &nb            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-10-22 18:59:02
                            
                                50阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            一、系统centOS7以上,至少三台主机  添加ip 主机名映射关系:(每台主机都要做)vim /etc/hosts  
    127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4
    ::1 localhost localhost.localdomain localhost6 localho            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-07-30 16:12:34
                            
                                33阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            CDH 安装 市场上免费大数据框架主要有三个版本,原生的 Apache 版本,Clou            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2020-08-11 16:44:00
                            
                                256阅读
                            
                                                                                    
                                2评论
                            
                                                 
                 
                
                             
         
            
            
            
            原文地址:http://blog.sina.com.cn/s/blog_87ace1a00101kp0y.html产品运维建议初步整理:1.要有专门的人负责运维,至少当非开发人员发现问题时,能够在第一时间找到问题处理人。2.每天定时查询服务器的运行状态,至少早上上班时和晚上下班前两次;每天下班前发送“日常运维报告”邮件给主要关系人;每周整理一次“周运维报告”,统一当周系统运行情况。3.提供部署手册            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                            精选
                                                        
                            2014-01-17 10:20:05
                            
                                3526阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            产品运维建议初步整理:1.要有专门的人负责运维,至少当非开发人员发现问题时,能够在第一时间找到问题处理人。2.每天定时查询服务器的运行状态,至少早上上班时和晚上下班前两次;每天下班前发送“日常运维报告”邮件给主要关系人;每周整理一次“周运维报告”,统一当周系统运行情况。3.提供部署手册、运维手册和操作手册;提供系统升级部署文档规范。4.整理该产品常见问题的解决方法日志,当遇到不能解决的问题时,要根            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                            精选
                                                        
                            2014-01-23 14:27:58
                            
                                10000+阅读
                            
                                                        
                                点赞
                            
                                                                                    
                                1评论
                            
                                                 
                 
                
                             
         
            
            
            
            ### K8S运维手册
作为一名经验丰富的开发者,我将向你介绍如何编写Kubernetes(K8S)的运维手册。K8S是一个流行的容器编排平台,用于自动化容器的部署、扩展和管理。编写运维手册可以帮助团队更好地管理和维护K8S集群。下面是编写K8S运维手册的基本步骤:
| 步骤 | 描述 |
| --- | --- |
| 1 | 确定手册的范围和目的 |
| 2 | 收集K8S集群的相关信息            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2024-04-30 11:18:12
                            
                                76阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            基于RRDTOOL+CACTI性能监视系统的架构一、概述 Linux下用的最多的是MRTG的性能监视,MRTG配置比较简单,MRTG的确是非常好的东东,但我认为它毕竟已经是一套很旧的软件了,其作者在多年前就已经开发了RRDTool代替该软件,现在已经发展得很成熟。既然有更好的选择,为什么我们还要用MRTG呢? 简单的说,rrdtool就是一个强大的绘图的引擎,很多语言都可以调用rrdtool绘图。            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-03-25 22:33:32
                            
                                104阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            hadoop运维报错总结初衷case1功能快捷键合理的创建标题,有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能,丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 初衷把平常工作中遇到的问题报错            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-04-19 18:18:50
                            
                                178阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            在Kubernetes(K8S)部署过程中,了解Linux系统的基础知识和运维技能是非常重要的。Linux运维手册可以帮助我们更好地管理和维护K8S集群,确保其稳定运行。在本文中,我将介绍如何创建一个简单的Linux运维手册,帮助你更好地理解和处理Linux系统运维工作。
### 创建Linux运维手册流程:
| 步骤 | 操作 |
| ------ | ------ |
| 1 | 安装Li            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2024-04-30 11:17:06
                            
                                116阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            在Kubernetes(K8S)环境中,IT系统运维手册是非常重要的一环,它包含了关于系统的配置、部署、维护等信息,帮助开发人员和运维人员更好地了解系统运作的方式和流程。在本文中,我将详细介绍如何创建一个IT系统运维手册,并给出相应的代码示例来实现。
首先,让我们来看一下创建IT系统运维手册的步骤:
| 步骤 | 内容                  |
| ---- | ---------            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2024-04-30 11:18:55
                            
                                378阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            # K8S系统运维手册编写指南
作为一名经验丰富的开发者,编写系统运维手册对于团队的统一运维和维护具有非常重要的意义。在Kubernetes(K8S)环境下,系统运维手册更是必不可少的工具。本文将介绍如何编写K8S系统运维手册,并且通过具体的步骤和代码示例来帮助刚入行的小白学习和掌握。
## 步骤概览
下表是编写K8S系统运维手册的整个流程,包括创建文档、编写内容、版本控制、分享发布等步骤。            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2024-04-30 11:19:10
                            
                                175阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            标题:Kubernetes运维手册:带你逐步实现关键词搜索功能
引言:
Kubernetes(简称K8S)是目前最为热门的容器编排平台之一。作为一名经验丰富的开发者,我将在本文中向你展示如何使用Kubernetes实现关键词搜索功能。无论是对于刚入行的小白还是有一定经验的开发者,本文都将逐步引导你完成这个任务。接下来,我将用表格展示整个实现过程的步骤,并详细解释每一步需要做什么以及需要使用的每一            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2024-01-25 20:51:53
                            
                                83阅读
                            
                                                                             
                 
                
                             
         
            
            
            
             文章目录Docker技术简介背景分析Docker 核心对象镜像(Image)容器(Container)Docker 应用架构分析架构图Docker运行机制Docker安装离线安装Docker系统Docker服务基本操作查看Docker状态停止docker服务注意,启动前在测试时应关闭liunx系统的防火墙启动docker服务设置Docker开机自启禁用Docker开机自启重新启动Docker服务            
                
         
            
            
            
            启动HDFS并运行MapReduce程序1. 分析    (1)配置集群    (2)启动、测试集群增、删、查   (3)执行WordCount案例2. 执行步骤(1)配置集群(a)配置:hadoop-env.shLinux系统中获取JDK的安装路径:[atguigu@ hadoop101 ~]# echo $JAVA_HOME
/op            
                
         
            
            
            
            cacti运维手册 1      前言1.1  系统功能概述cacti是通过 snmpget来获取数据,使用 RRDtool绘画图形,而且你完全可以不需要了解RRDtool复杂的参数。它提供了非常强大的数据和用户管理功能,可以指定每一个用户能查看树状结构、host以及任何一张图,还可以与LDAP结合进行用户验证,同时也能自己增加            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2017-08-25 17:01:12
                            
                                1450阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            nagios运维手册 1      前言1.1  系统功能概述Nagios是一款开源的免费网络监视工具,能有效监控Windows、Linux和Unix的主机状态,交换机路由器等网络设置,打印机等。在系统或服务状态异常时发出邮件或短信报警第一时间通知网站运维人员,在状态恢复后发出正常的邮件或短信通知。Nagios 可以监控的功能有            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2017-08-25 17:53:04
                            
                                3633阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            ## MySQL运维手册
### 1. 概述
MySQL是一个开源的关系型数据库管理系统,被广泛应用于Web应用程序的后端数据存储。作为一个运维人员,了解MySQL的基本知识和常用操作是至关重要的。本文将向您介绍一些MySQL的基本概念和常用的运维操作。
### 2. 数据库连接
在进行任何MySQL操作之前,首先需要建立与数据库的连接。可以使用各种编程语言提供的MySQL驱动程序来实现连            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2023-07-27 09:19:37
                            
                                198阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            **Kubernetes服务 运维手册**
作为一名经验丰富的开发者,我们经常会接触到 Kubernetes(简称 K8S)这一容器编排工具。在实际开发中,我们经常需要对服务进行运维管理。本文将介绍如何编写一个服务运维手册,并通过代码示例来详细讲解。现在让我们一起来帮助刚入行的小白完成这项任务吧!
**服务 运维手册流程**
| 步骤 | 操作           | 代码示例            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2024-04-30 11:15:53
                            
                                110阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            Ceph运维手册:高效管理您的分布式存储系统
作为一种流行的分布式存储系统,Ceph提供了可扩展性和高可靠性的解决方案。然而,要确保系统的有效运行和管理,Ceph运维手册成为了必备工具之一。本文将介绍Ceph运维手册的重要性和如何有效地管理和维护您的Ceph集群。
Ceph运维手册是一份详细的文件,其中包含了针对Ceph集群的运维指南和最佳实践。它提供了关于配置、监控、故障排除和性能优化等方面            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2024-02-04 13:07:29
                            
                                229阅读