贺磊 关注
- 319W+
- 人气
- 511
- 评论
- 631
- 点赞
最近遇到一个kafka方面的问题，大致就是由于consumer处理业务超时，导致无法正常提交Offset，进而导致无法消费新消息的问题。下面我想从以下几个方面对此次故障排查进行复盘分析：业务背景、问题描述、排查思路、经验教训。
因公司服务器上部署应用较多，在有大并发访问、业务逻辑有问题的情况下反复互相调用或者有异常流量的时候，需要对业务应用进行故障定位，所以利用python调用iftop命令来获取应用进程流量，结合zabbix，可帮助定位分析问题。，以下是脚本内容，大概思路是：利用iftop命令iftop-t-P-N-n-s2来获取流量信息对获取的流量信息进行处理，单位换算，同一个应用程序的所有链接流量进行合计（因为一个应用
文章知识点：[]调优的必要性[]调优的维度和见解分歧[]Nginx调优项一、调优的必要性一直不愿意写优化的内容出来分享，实在是不知道该如何取写。因为，写不好就会被各种慰问，今天终于还是写了，因为有太多人私信或在群里问我或者让给分享经验，我还是从了。在聊调优之前，我们先要知道为何调优，业务运行和调优的关系。业务运行：线上业务正常运行，承载了公司业务。监控业务：通过监控业务对线上业务进行监控，及时
阅读
评论
收藏
这几天工作忙得差不多了，有点时间继续折腾我的arduino，上次从TB买的arduino套件中有一个人体热能感应模块，就是用来感应人体接近信号的。今天我们用这个东东来做一个简易的智能垃圾桶。要实现的功用是：当有人接近时，垃圾能用自动打开盖子，人离开时，盖子能自动关闭。一、所需材料和工具：1Arduino单片机我用的是ArduinoNano2人体热能感应模块我用的是一个杂牌的，但接线和使用方式和HC
阅读
评论
收藏
集合可以看作是一种容器，用来存储对象信息。所有集合类都位于java.util包下，但支持多线程的集合类位于**java.util.concurrent**包下。
阅读
评论
收藏
1.本章介绍设置pod dns 方法;
阅读
评论
收藏
项目介绍java开发中，参数校验是非常常见的需求。但是hibernate-validator在使用过程中，依然会存在一些问题。特性支持fluent-validation支持jsr-303注解支持i18n支持用户自定义策略支持用户自定义注解开源地址valid创作目的hibernate-validator无法满足的场景如今java最流行的hibernate-validator框架，但是有些场景是无法满
阅读
评论
收藏
排错背景：在一次生产环境的部署过程中，配置文件中配置的访问地址为集群的Service，配置好后发现服务不能正常访问，遂启动了一个busybox进行测试，测试发现在busybox中，能通过coredns正常的解析到IP，然后去ping了一下service，发现不能ping通，ping clusterIP也不能ping通。排错经历：首先排查了kube-proxy是否正常，发现启动都是正常的，然后也重启
阅读
评论
收藏
linux下虚拟主机的三种实现方式
阅读
评论
收藏
MySQL索引MySQL支持诸多存储引擎，而各种存储引擎对索引的支持也各不相同，因此MySQL数据库支持多种索引类型，如BTree索引，哈希索引，全文索引等等。为了避免混乱，本文将只关注于BTree索引，因为这是平常使用MySQL时主要打交道的索引。MySQL官方对索引的定义为：索引（Index）是帮助MySQL高效获取数据的数据结构。提取句子主干，就可以得到索引的本质：索引是数据结构。MySQL
阅读
评论
收藏
以诙谐幽默的方式分析单身的原因
阅读
评论
收藏
Expext概述Expect是建立在tcl基础上的一个工具,Expect是用来自动化控制和测试的工具。主要解决shell脚本中不可交互的问题。有助于大规模的系统运维工作。在日常的运维与开发中,常常需要运城登录到服务器,然而登录的过程却是个需要交互的过程,可能会要输入yes/no等信息,使用Expect脚本即可实现免交互操作。Expect安装挂载光盘制作本地YUM源执行安装命令yuminstalle
阅读
评论
收藏
案例实施本实验实现以下功能：配置ELK日志分析群集。使用logstash收集日志。使用Kibana查看分析日志。1.在两个ELK节点上配置域名解析，通过本地/etc/hosts文件实现。node1上的配置：[root@localhost~]#vim/etc/hostnamenode1[root@localhost~]#vim/etc/hosts127.0.0.1localhostlocalhost
阅读
评论
收藏
针对IPv6地址自动分配的Stateless与Stateful方式，基于实验进行最详细的阐述
阅读
评论
收藏
01概述Helm是kubernetes包管理工具，可以方便快捷的安装、管理、卸载kubernetes应用，类似于Linux操作系统中yum或apt-get软件的作用。其主要的设计目的：创建新的chart包将charts包文件打包压缩同chart仓库进行集成，获取charts文件安装及卸载charts到kubernetes集群管理通过helm安装的charts应用02概念介绍chart:一个Helm
阅读
评论
收藏
case多分支语句case语句的结构针对变量的不同取值，分别执行不同的命令序列实例1击键类型识别提示用户输入一个字符判断出该字符是字母，数字或者其他字符#!/bin/bashread-p"请输入一个字符："keycase$keyin[a-z]|[A-Z])echo"你输入的是字母";;[0-9])echo"你输入的是数字";;*)echo"你输入的是特殊字符"esac实例2输入成绩，查看成绩等级#
阅读
评论
收藏
集群环境：系统centos7master、node----------------(前期调试在每台进行操作)----------------设置三台机器的主机名：master上执行：hostnamectl--staticset-hostnamek8s-masternode1上执行：hostnamectl--staticset-hostnamek8s-node-1node2上执行：hostnamec
阅读
评论
收藏
默认权限umask[root@CentOS7data]#touchfile{1,2}.txt[root@CentOS7data]#lltotal0-rw-r--r--1rootroot0Sep3015:56file1.txt-rw-r--r--1rootroot0Sep3015:56file2.txtumask是什么从上面的例子中可以发现，新建文件的默认权限都是一样的，为啥会这样？这就要聊聊uma
阅读
评论
收藏
在同一个vSphere数据中心中，如果创建多个vSAN群集，那么每个vSAN群集的ESXi主机应该都是全新安装的操作系统。如果从一个vSAN群集中移除ESXi主机，再在同一个数据中心中创建新的vSAN群集，那么只会显示一个vSAN存储，并且vSAN存储的容量大小显示不正确。近期在使用vSphere 6.7.0 U3进行测试时就出现了这个故障，现在将实验回顾一下，希望对其他读者有所帮助。在本次实验中
阅读
评论
收藏
为了更方便的使用性能计数器，以及在zabbix 上方便的进行对应的key书写，写了一个powershell 函数来加快这些过程，同时更改zabbix 默认模板及grafana 模板来快速查看windows机器的IOPS以及Latency，当然这也提供了一个思路来监控其他性能计数器。
阅读
评论
收藏
ORM对象关系映射及其实现方式
阅读
评论
收藏
1.简介k8s的APIServer提供了RESTful风格的网关接口,允许用户通过这个接口向k8s集群发起请求。如创建一个Pod或销毁一个Pod等操作用户可以通过编程语言遵循APIServer提供的网关接口规范和APIServer进行通信,也可以通过k8s自带的kubectl命令和APIServer进行通信,或者通过由Dashboard提供的WebUI和APIServer进行通信其中kubectl
阅读
评论
收藏
前言：K8S是一个成熟的容器业务集群管理方案，但是目前来讲，在存储方面显得过于复杂和繁琐，更不要说中间穿插着秘钥和认证的管理，尽管谷歌在开源它之前有很多年的实战经验，但是从目前官方的发布文档来看，依然显得学习成本略高，我们来看看这个学习流程：1，最初，学习k8s发现它罗列了一系列存储方案，无非就是对一系列本地和云存储的广泛支持：看到这么多的存储卷类型的确很唬人，但是没有办法，在目前存储界没有达到统
阅读
评论
收藏
一.什么是shell?在linux内核与用户直接的解释器程序；通常指/bin/bash;相当于操作系统的“外壳”。二.怎么使用shell?shell的使用方式？1.命令行==交互式；逐条解释执行，效率低2.脚本==非交互式；批量执行，效率高；方便在后台静悄悄地运行。三.怎么切换shell？怎么使用某个特定shell?1.通过usermod,chsh更改登录的shell2.手动执行目标shell程序
阅读
评论
收藏
Windows Server 2008 R2文件服务器升级到Windows Server 2016用户单位有2台Windows Server 2008 R2的文件服务器，已经加入到域。域服务器另有两台，是Windows Server 2016的操作系统。因为Windows Server 2008 和 2008 R2 技术支持将于2020年1月14日结束，所以用户想将这2台Windows Serve
实验环境：理论之前的博客已经写过，这次直接实验。具体拓扑图如下，注意R3接口不够，需要添加两个NM-1FE-TX单板。实际操作：1.配置R1。R1#conft//进入全局模式Enterconfigurationcommands,oneperline.EndwithCNTL/Z.R1(config)#intf0/0//进入接口模式R1(config-if)#ipadd192.168.10.1255.
阅读
评论
收藏
记一场由docker容器“ java.lang.OutOfMemoryError”引发的环境“雪崩”
阅读
评论
收藏
React的代码库现在已经比较庞大了，加上v16的Fiber重构，初学者很容易陷入细节的大海，搞懂了会让人觉得自己很牛逼，搞不懂很容易让人失去信心,怀疑自己是否应该继续搞前端。那么尝试在本文这里找回一点自信吧(高手绕路).Preact是React的缩略版,体积非常小,但五脏俱全.如果你想了解React的基本原理,可以去学习学习Preact的源码,这也正是本文的目的。关于React原理的优秀的文
阅读
评论
收藏
从海量安全事件中挖掘有用的威胁信息与情报是当今讨论的热门话题，同时这也是一个难点？怎么实现呢？本文讨论的关联分析可疑解决这种疑问。
本文讨论OSSIM传感器在通过GET框架实现OSSIM代理和OSSIM服务器之间通信协议和数据格式的转换问题。
阅读
评论
收藏
