贺磊 关注
- 319W+
- 人气
- 511
- 评论
- 631
- 点赞
最近遇到一个kafka方面的问题，大致就是由于consumer处理业务超时，导致无法正常提交Offset，进而导致无法消费新消息的问题。下面我想从以下几个方面对此次故障排查进行复盘分析：业务背景、问题描述、排查思路、经验教训。
因公司服务器上部署应用较多，在有大并发访问、业务逻辑有问题的情况下反复互相调用或者有异常流量的时候，需要对业务应用进行故障定位，所以利用python调用iftop命令来获取应用进程流量，结合zabbix，可帮助定位分析问题。，以下是脚本内容，大概思路是：利用iftop命令iftop-t-P-N-n-s2来获取流量信息对获取的流量信息进行处理，单位换算，同一个应用程序的所有链接流量进行合计（因为一个应用
MySQL索引MySQL支持诸多存储引擎，而各种存储引擎对索引的支持也各不相同，因此MySQL数据库支持多种索引类型，如BTree索引，哈希索引，全文索引等等。为了避免混乱，本文将只关注于BTree索引，因为这是平常使用MySQL时主要打交道的索引。MySQL官方对索引的定义为：索引（Index）是帮助MySQL高效获取数据的数据结构。提取句子主干，就可以得到索引的本质：索引是数据结构。MySQL
阅读
评论
收藏
以诙谐幽默的方式分析单身的原因
阅读
评论
收藏
Expext概述Expect是建立在tcl基础上的一个工具,Expect是用来自动化控制和测试的工具。主要解决shell脚本中不可交互的问题。有助于大规模的系统运维工作。在日常的运维与开发中,常常需要运城登录到服务器,然而登录的过程却是个需要交互的过程,可能会要输入yes/no等信息,使用Expect脚本即可实现免交互操作。Expect安装挂载光盘制作本地YUM源执行安装命令yuminstalle
阅读
评论
收藏
案例实施本实验实现以下功能：配置ELK日志分析群集。使用logstash收集日志。使用Kibana查看分析日志。1.在两个ELK节点上配置域名解析，通过本地/etc/hosts文件实现。node1上的配置：[root@localhost~]#vim/etc/hostnamenode1[root@localhost~]#vim/etc/hosts127.0.0.1localhostlocalhost
阅读
评论
收藏
针对IPv6地址自动分配的Stateless与Stateful方式，基于实验进行最详细的阐述
阅读
评论
收藏
01概述Helm是kubernetes包管理工具，可以方便快捷的安装、管理、卸载kubernetes应用，类似于Linux操作系统中yum或apt-get软件的作用。其主要的设计目的：创建新的chart包将charts包文件打包压缩同chart仓库进行集成，获取charts文件安装及卸载charts到kubernetes集群管理通过helm安装的charts应用02概念介绍chart:一个Helm
阅读
评论
收藏
case多分支语句case语句的结构针对变量的不同取值，分别执行不同的命令序列实例1击键类型识别提示用户输入一个字符判断出该字符是字母，数字或者其他字符#!/bin/bashread-p"请输入一个字符："keycase$keyin[a-z]|[A-Z])echo"你输入的是字母";;[0-9])echo"你输入的是数字";;*)echo"你输入的是特殊字符"esac实例2输入成绩，查看成绩等级#
阅读
评论
收藏
集群环境：系统centos7master、node----------------(前期调试在每台进行操作)----------------设置三台机器的主机名：master上执行：hostnamectl--staticset-hostnamek8s-masternode1上执行：hostnamectl--staticset-hostnamek8s-node-1node2上执行：hostnamec
阅读
评论
收藏
默认权限umask[root@CentOS7data]#touchfile{1,2}.txt[root@CentOS7data]#lltotal0-rw-r--r--1rootroot0Sep3015:56file1.txt-rw-r--r--1rootroot0Sep3015:56file2.txtumask是什么从上面的例子中可以发现，新建文件的默认权限都是一样的，为啥会这样？这就要聊聊uma
阅读
评论
收藏
在同一个vSphere数据中心中，如果创建多个vSAN群集，那么每个vSAN群集的ESXi主机应该都是全新安装的操作系统。如果从一个vSAN群集中移除ESXi主机，再在同一个数据中心中创建新的vSAN群集，那么只会显示一个vSAN存储，并且vSAN存储的容量大小显示不正确。近期在使用vSphere 6.7.0 U3进行测试时就出现了这个故障，现在将实验回顾一下，希望对其他读者有所帮助。在本次实验中
阅读
评论
收藏
为了更方便的使用性能计数器，以及在zabbix 上方便的进行对应的key书写，写了一个powershell 函数来加快这些过程，同时更改zabbix 默认模板及grafana 模板来快速查看windows机器的IOPS以及Latency，当然这也提供了一个思路来监控其他性能计数器。
阅读
评论
收藏
ORM对象关系映射及其实现方式
阅读
评论
收藏
1.简介k8s的APIServer提供了RESTful风格的网关接口,允许用户通过这个接口向k8s集群发起请求。如创建一个Pod或销毁一个Pod等操作用户可以通过编程语言遵循APIServer提供的网关接口规范和APIServer进行通信,也可以通过k8s自带的kubectl命令和APIServer进行通信,或者通过由Dashboard提供的WebUI和APIServer进行通信其中kubectl
阅读
评论
收藏
前言：K8S是一个成熟的容器业务集群管理方案，但是目前来讲，在存储方面显得过于复杂和繁琐，更不要说中间穿插着秘钥和认证的管理，尽管谷歌在开源它之前有很多年的实战经验，但是从目前官方的发布文档来看，依然显得学习成本略高，我们来看看这个学习流程：1，最初，学习k8s发现它罗列了一系列存储方案，无非就是对一系列本地和云存储的广泛支持：看到这么多的存储卷类型的确很唬人，但是没有办法，在目前存储界没有达到统
阅读
评论
收藏
一.什么是shell?在linux内核与用户直接的解释器程序；通常指/bin/bash;相当于操作系统的“外壳”。二.怎么使用shell?shell的使用方式？1.命令行==交互式；逐条解释执行，效率低2.脚本==非交互式；批量执行，效率高；方便在后台静悄悄地运行。三.怎么切换shell？怎么使用某个特定shell?1.通过usermod,chsh更改登录的shell2.手动执行目标shell程序
阅读
评论
收藏
Windows Server 2008 R2文件服务器升级到Windows Server 2016用户单位有2台Windows Server 2008 R2的文件服务器，已经加入到域。域服务器另有两台，是Windows Server 2016的操作系统。因为Windows Server 2008 和 2008 R2 技术支持将于2020年1月14日结束，所以用户想将这2台Windows Serve
实验环境：理论之前的博客已经写过，这次直接实验。具体拓扑图如下，注意R3接口不够，需要添加两个NM-1FE-TX单板。实际操作：1.配置R1。R1#conft//进入全局模式Enterconfigurationcommands,oneperline.EndwithCNTL/Z.R1(config)#intf0/0//进入接口模式R1(config-if)#ipadd192.168.10.1255.
阅读
评论
收藏
记一场由docker容器“ java.lang.OutOfMemoryError”引发的环境“雪崩”
阅读
评论
收藏
React的代码库现在已经比较庞大了，加上v16的Fiber重构，初学者很容易陷入细节的大海，搞懂了会让人觉得自己很牛逼，搞不懂很容易让人失去信心,怀疑自己是否应该继续搞前端。那么尝试在本文这里找回一点自信吧(高手绕路).Preact是React的缩略版,体积非常小,但五脏俱全.如果你想了解React的基本原理,可以去学习学习Preact的源码,这也正是本文的目的。关于React原理的优秀的文
阅读
评论
收藏
从海量安全事件中挖掘有用的威胁信息与情报是当今讨论的热门话题，同时这也是一个难点？怎么实现呢？本文讨论的关联分析可疑解决这种疑问。
本文讨论OSSIM传感器在通过GET框架实现OSSIM代理和OSSIM服务器之间通信协议和数据格式的转换问题。
阅读
评论
收藏
Teams中的会议室分类
Java之final关键字解析
阅读
评论
收藏
GROUP BY 后 SELECT 列的限制标准 SQL 规定，在对表进行聚合查询的时候，只能在 SELECT 子句中写下面 3 种内容：通过 GROUP BY 子句指定的聚合键、聚合函数（SUM 、AVG 等）、常量。我们来看个例子我们有 学生班级表（tbl_student_class） 以及 数据如下 ：DROP TABLE IF EXISTS tbl_student_class; CREAT
阅读
评论
收藏
环境说明：主机名操作系统版本ipdockerversionkubeletversion配置备注masterCentos7.6.1810172.27.9.131Docker18.09.6V1.14.22C2Gmaster主机node01Centos7.6.1810172.27.9.135Docker18.09.6V1.14.22C2Gnode节点node02Centos7.6.1810172.27.
阅读
评论
收藏
一、ADRMS是什么？1、ADRMS简介RMS（RightsManagementServices，权限管理服务）早在Windows2003中就已经存在，目的是为企业的信息数据提供最大的安全防护技术。在Windowsserver2016中，RMS服务得到了加强，其已经作为常用服务内置在操作系统当中，并正式被命名为ADRMS（ActiveDirectory权限管理服务）。它与支持ADRMS的应用成树协
阅读
评论
收藏
男篮世界杯已经落下帷幕，相信看球的朋友们都已经过足了篮球瘾。有些许遗憾，也有世界霸主的失落，还有老兵不死的坚持，当然还有西班牙军团的登顶。自杀式输给波兰，溃败式负于尼日利亚，从前一直代表亚洲征战奥运会的中国，可能就要缺席下一届了。当阿联老去，中国即将不再有任何一名球员具备世界篮球运动员的水平，没有一个！期待中国男篮的再次崛起吧！星光黯淡，小将领衔，教练席上的神奇老者也没能创造神奇，历史最差战绩，我们
阅读
评论
收藏
处理过线上问题的同学基本上都会遇到系统突然运行缓慢，CPU 100%，以及Full GC次数过多的问题。当然，这些问题的最终导致的直观现象就是系统运行缓慢，并且有大量的报警。本文主要针对系统运行缓慢这一问题，提供该问题的排查思路，从而定位出问题的代码点，进而提供解决该问题的思路。 对于线上系统突然产生的运行缓慢问题，如果该问题导致线上系统不可用，那么首先需要做的就是，导出jstack和内存信息，然后重启系统，尽快保证系统的可用性。这种情况可能的原因主要有两种： 代码中某个位置读取数据量较大，导致系统内存耗尽，从而导致Full GC次数过多，系统缓慢； 代码中有比较耗CPU的操作，导致CPU过高，系统运行缓慢； 相对来说，这是出现频率最高的两种线上问题，而且它们会直接导致系统不可用。另外有几种情况也会导致某个功能运行缓慢，但是不至于导致系统不可用： 代码某个位置有阻塞性的操作，导致该功能调用整体比较耗时，但出现是比较随机的； 某个线程由于某种原因而进入WAITING状态，此时该功能整体不可用，但是无法复现； 由于锁使用不当，导致多个线程进入死锁状态，从而导致系统整体比较缓
阅读
评论
收藏
