基于RRDTOOL+CACTI性能监视系统的架构一、概述 Linux下用的最多的是MRTG的性能监视,MRTG配置比较简单,MRTG的确是非常好的东东,但我认为它毕竟已经是一套很旧的软件了,其作者在多年前就已经开发了RRDTool代替该软件,现在已经发展得很成熟。既然有更好的选择,为什么我们还要用MRTG呢? 简单的说,rrdtool就是一个强大的绘图的引擎,很多语言都可以调用rrdtool绘图。            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-03-25 22:33:32
                            
                                104阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            1、列出所有Hadoop Shell支持的命令 $ bin/hadoop fs -help
2、显示关于某个命令的详细信息
$ bin/hadoop fs -help command-name
3、用户可使用以下命令在指定路径下查看历史日志汇总
$ bin/hadoop job -history output-dir #这条命令会显示作业的细节信息,失败和终止的任务细节。
4、关于作业的更多细节,            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-07-04 14:33:28
                            
                                271阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            从这篇开始记录一下集群迁移的事情早先因为机房没地方,就已经开始规划集群搬机房的事情,最近终于开始动手了,我会把这次不停机迁移的过程遇到的主要问题和矛盾以及各种解决方法记录下来。集群规模说大不大,几百台,总容量30PB左右。Hadoop使用CDH 5.5.1加一些自定义patch的rpm打包编译版本。总的方案是集群不停机,在两个机房之间架设专线,旧机房decommission,拉到新机房recomm            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-12-02 20:56:59
                            
                                94阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            防止ssh 被别人暴力破解: 安装fail2ban, 安装jumpserver 数据库要给用户查询使用: metabase,从库 进程守护:supervisor(自动重启)
                    
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2023-05-06 09:07:49
                            
                                91阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            运维笔记(一)标签:  运维 linux 内存溢出目录运维笔记(一)1.查看系统日志2.查看内存3.top4. ps -aux --sort -pmem | less5.ps -ef|grep java6.硬盘背景描述:		网站试用过程中有时出现突然卡主,过1、2分钟才有反应的情况,一开始没有在意,以为是测试人员的网络问题(疫情期间都在家办公)。后来这个问题每天都会出现,我意识到这其中必然存在某个            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-03-12 14:36:50
                            
                                76阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            一、系统centOS7以上,至少三台主机  添加ip 主机名映射关系:(每台主机都要做)vim /etc/hosts  
    127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4
    ::1 localhost localhost.localdomain localhost6 localho            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2024-07-30 16:12:34
                            
                                36阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            文章目录1. 主机集合2. 数据中心管理3. 节点管理4. 存储管理5. Ceph存储池PG比例管理6. 计划任务7. Ceph管理8. 物理机GPU9. vGPU10. 透传设备管理11. 多外网管理12. 云平台物理网络互通13. 租户网络类型管理14. DPDK管理15. SR-IOV网络管理16. 大页内存管理17. 大屏展示18. 系统巡检19. 镜像库迁移1. 主机集合主机集合,又称主机聚集,即一系列有共同属性的物理机组成的一个逻辑的小集群,通常用于更好的分配和调度计算资源。一般情况下,一个            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2021-11-13 13:51:17
                            
                                10000+阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            文章目录1. 主机集合2. 数据中心管理3. 节点管理4. 存储管理5. Ceph存储池PG比例管理6. 计划任务7. Ceph管理8. 物理机GPU9. vGPU10. 透传设备管理11. 多外网管理12. 云平台物理网络互通            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2022-01-10 17:33:15
                            
                                796阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            
一、将mysql的日志输出到syslog中:
(1)启动时添加参数
 /usr/local/mysql/bin/mysqld_safe --syslog --syslog-tag="mysql-log" --user=mysql & 
(2)修改调用mysql的mysqld_safe脚本的选项  40.10:40.3
  vim            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2012-11-06 15:16:01
                            
                                1054阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            Kubernetes(简称K8S)是一个开源的容器编排平台,用于自动化部署、扩展和管理容器化应用程序。作为一名经验丰富的开发者,下面我将带领你了解Kubernetes运维笔记,并提供一些代码示例帮助你入门。
### K8S关键词实现流程
下面是实现K8S关键词的基本流程,可以用表格展示步骤:
| 步骤 | 描述 |
|------|------|
| 1 | 部署Kubernetes集群 |            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2024-01-25 20:49:00
                            
                                110阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            1.tar命令解压去掉(跳过)第一层目录tar-zxvffinename.tar.gz-C./--strip-components12.sed命令#删除最后一行sed-i'$d'filenamesed命令删除包含特定字符行#删除包含"xxx"的行sed-i'/xxx/d'filename            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2020-10-09 09:41:16
                            
                                460阅读
                            
                                                                                    
                                1评论
                            
                                                 
                 
                
                             
         
            
            
            
            Linux运维笔记是每位Linux系统管理员必备的技能之一,而在Linux系统管理员的工作中,使用红帽操作系统是非常常见的。红帽操作系统是一种基于Linux内核的开源操作系统,广泛应用于企业级服务器和工作站环境中。
在进行Linux运维工作时,掌握红帽操作系统的相关知识是非常重要的。在这篇文章中,我们将分享一些关于红帽操作系统的运维笔记,帮助大家更好地管理和维护Linux系统。
首先,了解红帽            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2024-03-01 11:06:35
                            
                                84阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            【代码】linux 运维笔记。            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2023-02-26 09:20:52
                            
                                253阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            # Python运维笔记实现流程
## 步骤概览
以下是实现"Python运维笔记"的步骤概览:
| 步骤 |       操作        |
| ---- | ----------------- |
| 1    | 创建Python虚拟环境 |
| 2    | 安装必要的库       |
| 3    | 编写代码           |
| 4    | 测试代码            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2024-01-12 07:09:44
                            
                                38阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            # MySQLDBA运维入门笔记
在现代信息技术迅速发展的背景下,数据库作为信息存储的重要工具,已经成为许多企业所依赖的核心部分。MySQL是目前最流行的开源关系数据库管理系统之一,被广泛用于网站建设、数据存储等场景。本文将对MySQL的基本运维进行科普,并提供相关的代码示例。
## 什么是MySQL?
MySQL是一款功能强大的开源关系数据库管理系统(RDBMS),它使用结构化查询语言(S            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2024-09-05 05:35:54
                            
                                23阅读
                            
                                                                             
                 
                
                             
         
            
            
            
            一个成熟的数据库架构并不是一开始设计就具备高可用、高伸缩等特性的,它是随着用户量的增加,基础架构才逐渐完善。这篇博文主要谈MySQL数据库发展周期中所面临的问题及优化方案,暂且抛开前端应用不说,大致分为以下五个阶段:1、数据库表设计  项目立项后,开发部根据产品部需求开发项目,开发工程师工作其中一部分就是对表结构设计。对于数据库来说,这点很重要,如果设计不当,会直接影响访问速度和用户体验            
                
         
            
            
            
            一、前言   1.数据库能做什么?        不论是淘宝,吃鸡,爱奇艺,抖音,快手,知乎, 百度贴吧等,总所周知的服务程序。        存储的数据,包含用户的账号,密码,级别,存款,余额,等级,购物记录,头像本地            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2023-10-08 20:30:07
                            
                                72阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            CDH 安装 市场上免费大数据框架主要有三个版本,原生的 Apache 版本,Clou            
                
                    
                        
                                                            
                                                                        
                                                                                        转载
                                                                                    
                            2020-08-11 16:44:00
                            
                                256阅读
                            
                                                                                    
                                2评论
                            
                                                 
                 
                
                             
         
            
            
            
            在前的文章中介绍过《CDH集成的kerberos迁移实战》,由此也考虑到kerberos单            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2022-11-26 23:24:01
                            
                                601阅读
                            
                                                                             
                 
                
                                
                     
                                    
                             
         
            
            
            
            新猿教育山河带你0基础玩转linux运维,学成后可以就业。            
                
                    
                        
                                                            
                                                                        
                                                                                        原创
                                                                                    
                            2021-11-11 17:04:56
                            
                                580阅读