近期新项目到了试运行阶段，安排运维组介入。初步规划了一下运维组的巡检内容。给巡检的同事写了一些工具，其中就报告数据统计报告。
该工具功能是，从ES中统计数据，写入word文档，同时使用统计的数据重新构造数据结构，生成分析图。分析图作为邮件的正文，word报告作为附件。
代码就不全贴了，包括docx的内容，之前帖子也写了很多。贴几个重点片段。数据收集逻辑报告除自己看之外，同时也要发给甲方代表。另外指
转载
2024-04-20 22:25:32
134阅读
1、通道计量数据延迟不显示优化1）背景日志通道里数据延迟无法展示2)问题定位分析 3）问题解决缩小默认查询时间，降低数据库查询压力。 2、kafka消费数据不展示，消费组有流量 2）问题定位首先检查用户配置是否正确，如果用户配置错了消费组id,是有可能出现消费组相关监控不显示的情况的。检查后，配置无误。 那只有一种可能，kafka consume
转载
2024-09-02 15:00:42
52阅读
1 Kafka操作日志的清理方法Kafka0.8版本长时间运行过程中，在kafka_2.8.0-0.8.0/logs目录下产生了大量的kafka-request.log.*和server.log.*文件，其中*代表日期和时间，比如kafka-request.log.2014-12-08-03和server.log.2014-12-06-03，这些文件对磁盘空间的消耗非常大，需要
转载
2024-03-25 22:15:23
72阅读
点赞
一.前言kafka-manager是Yahoo开源的Kafka管理工具，并在持续提交。是目前最好用kafka监控开源软件。由于文档较少，scala开发，对于有些术语的确无法理解，请抱歉。本文也介绍运维常用kafka命令。文档根据大家反馈，会持续更新，请关注.二.kafka-manager介绍管理多个集群方便查看集群状态执行preferred replica election批量为多个Topic生成
转载
2024-09-09 05:49:05
137阅读
有朋友在电气服务云平台上留言问：有什么好的办法来判断变频器的好坏吗？接下来就让小编来解答一下这位朋友的疑问吧！都知道，变频器的好坏靠肉眼是无法看出来的，只能利用工具来进行检测。其实，一个判断变频器是否出故障的简单方法就是通电检测。检测时最好在变频器输出端接入一台功率小于变频器额定功率的电机，这样就可以检测出变频器内部是否出现故障。特别是通电后在低频大扭矩是考验变频器算法的直接有效的方法，在更改好参
Kafka 集群部署1：下载安装包 wget http://mirrors.hust.edu.cn/apache/kafka/0.8.2.2/kafka_2.11-0.8.2.2.tgz2：解压安装包tar -zxvf /usr/apps/kafka_2.11-0.8.2.2.tgz3：修改配置文件Producer 配置文件详情########################
转载
2024-09-24 09:44:58
140阅读
Kafka常用脚本
在Kafka安装目录下（$KAFKA_HOME/bin），提供了很多内置的脚本供我们使用。使用脚本可以测试Kafka的大多数功能，下面我们就脚本的使用作出说明。启动broker
bin/kafka-server-start.sh脚本提供了启动broker的功能。前台启动：> bin/kafka-server-start.sh config/server.propertie
转载
2024-02-27 17:43:51
95阅读
#! /usr/bin/env python
# -*- coding: utf-8 -*-
# __author__ = "chenhao"
import paramiko
def sftp_exec_command(host,port,username,password,command):
ssh = paramiko.SSHClient()
ssh.set_missing_host_k
转载
2024-05-06 07:40:47
43阅读
#!/usr/bin/python -u
#-*- coding:utf-8 -*-
'''
程序:solaris_status.py
author: gyh9711
功能:
系统状态信息获取
语言:
sh + python
注意：
部分调用命令需要用到root权限
测试情况:
系统版本:solaris10 系统测试ok
测试服务器型号:sun 6900 6800 v445 v440 M3000
转载
2023-07-02 19:42:13
247阅读
## Python 巡检流程
为了实现 Python 巡检，我们可以按照以下步骤进行操作：
| 步骤 | 描述 |
| --- | --- |
| 步骤一 | 安装必要的 Python 工具包 |
| 步骤二 | 编写巡检脚本 |
| 步骤三 | 运行巡检脚本 |
| 步骤四 | 分析巡检结果 |
| 步骤五 | 提供解决方案 |
下面我们逐步详细介绍每个步骤的具体操作。
### 步骤一：
原创
2023-08-26 07:48:57
96阅读
Python实现网络出口带宽自动巡检数据获取1.eSitht介绍2.eSight API3.获取openid4.获取接口数据数据解析1.获取最值与均值2.按照单位排序代码整理 今天跟大家分享一个多职场网络出口带宽自动巡检的实例，话不多说，先看一下效果： 实现的流程步骤大致如下，最后设置定时任务即可实现定时自动巡检，省心省事~ 由于整体涉及的内容较多，今天我们挑核心部分进行分享： 数据获取
转载
2023-10-05 17:30:53
206阅读
Python自动化网络巡检-使用说明正式版包括所有命令，可以实现网络设备配置备份，更改密码，查看信息，修改配置等功能。目前匹配思科、华三、华为、锐捷和迈普部分设备，如果不能自动匹配命令，可以提供程序反馈的a-error-log文件联系我更新程序。第一步：在TXT-to-CSV.txt里填写设备名称、IP、用户名、密码：举例如下：路由器1 172.16.0.1 admin admin@123交换机1
转载
2023-10-08 14:53:36
152阅读
Kafka的了解与基本应用一．关于Kafka二．为什么要使用kafka1.解耦2.冗余3.扩展性4.灵活性 & 峰值处理能力5.数据一致性和可靠性三．zookeeper扮演什么角色1. 存储kafka的各种元数据2. 生产者与消费者负载均衡四．zookeeper安装1. 下载地址2.压缩包放到指定目录解压3.复制zoo_sample.cfg文件到zoo.cfg(zookeeper配置文件
转载
2024-02-23 16:03:46
156阅读
作者：车 目录1 巡检系统的功能与指标参数2 巡检系统的总体设计方案2.1 巡检系统的硬件方案2.2 巡检系统的软件方案STM32CubeMXKeil ARM2.3 巡检系统的测试方案 1 巡检系统的功能与指标参数系统的具体功能和参数定义如下： (1)本设计中小车需要完成巡检任务，小车在整个过程中的车速要求为0~20cm/s。 (2)用来循迹的灰度传感器的探测距离是10~50mm，灰度循迹模块中
转载
2024-01-03 13:07:43
121阅读
需求描述在我们的生产环境中，大部分情况下需要有自己的运维体制，包括自己健康状态的检测等。如果发生异常，需要提前预警的，通知形式一般为发邮件告知。在所有的自检流程中最基础的一个就是磁盘剩余空间检测。作为一个高效的DBA不可能每天都要上生产机上查看磁盘剩余或者直到磁盘无剩余空间报错后才采取扩容措施。当然，作为微软的服务器有着自己的监控软件：SCCM(System Center Configuratio
转载
2023-12-29 20:03:47
133阅读
一.分析需求与解决方案1.需要：定期的去统计所有主机的cpu mem disk的使用率。2.思路方案：1):安装云商的agent，调用api统计。 2):方案是接入自己的监
转载
2023-10-07 13:34:34
115阅读
Python测试环境巡检 测试过程中，由于测试环境机器较多且全都是在虚拟机上做的，经常会有某些机器挂掉导致站点访问出错的问题，手动去一个一个Ping实在是麻烦，于是用Python写了一个小脚本，来批量Ping测试。
实现思路：
一、设计要求：
1.目标机器的IP可配置
2.可以一次性Ping多台机器
3.Ping测试的结果可查询
4.如果有Ping
转载
2023-10-10 21:55:52
172阅读
概述 脚本功能功能是全程模拟了人的手工巡检，并收集数据，处理后发送邮件。主要分为远程到交换机，查看转换机状态如：show process cpu | in CPU utilization查看cpu占用率；将查询后的结果记录并保存下来，如结果；11%；读取查询的数据文件；将文件中的数据如11%提取部分需要计算出来；创建excel表格，将上一步获取
转载
2023-05-27 11:46:25
953阅读
文章目录前言一、通用查询日志1，概述2，开启通用日志查询3，删除查询日志二，慢查询日志1，概述2，配置文件设置三，错误日志总结 前言MySQL 的日志种类非常多，包括通用查询日志、慢查询日志、错误日志、二进制日志、中继日志、重做日志和回滚日志，内容比较多，而且都很重要，所以我们来花两节课的时间学习一下。 这节课，我会先具体讲一讲通用查询日志、慢查询日志和错误日志。一、通用查询日志1，概述通用查询
转载
2023-12-28 15:20:26
98阅读
在本文中，我们将详细探讨如何使用 Python 对 VMvare ESXi 进行巡检，包括常见问题的解决方案。随着IT基础设施的不断发展，拥有稳健的监控和管理系统是必不可少的，尤其是在使用 VMware ESXi 作为虚拟化平台时，巡检过程显得尤为重要。
### 问题背景
在虚拟化环境中，ESXi 作为架构的核心，一旦出现问题，将会影响到整个业务系统。影响包括但不限于虚拟机运行不稳定、存储I/
