微信公众号：运维开发故事，作者：乔克大家好，我是乔克。Kubernetes作为容器的编排平台，它是以集群的形式为业务提供服务。所以在日常的工作中，作为Kubernetes平台的维护者，会经常对集群进行管理。这里，我将集群管理分为以下几种：安装集群前置说明Kubernetes的集群安装分为：kubeadm安装和二进制安装。在这里，只会介绍kubeadm的安装。安装说明：集群节点：2个IP信息：mas
> 微信公众号：运维开发故事，作者：乔克大家好，我是乔克。什么是云原生？我相信大部分人都听过云原生，但是要你说出一个所以然，却不知道怎么开口，我也是一样。我不知道云原生到底是什么，从字面来看：云原生就是为云而生。云是什么？我理解云就是云计算，那云原生就是在云计算的基础之上设计实现，充分利用云的弹性、分布式等特性，让应用能够实现弹性伸缩、动态调度，也能更高的提升资源利用率。发展历程在说云原
微信公众号：运维开发故事，作者：乔克大家好，我是乔克。什么是Kubernetes？在《Docker容器技术》章节就有简单介绍Kuberntes，它是谷歌开源的容器容器集群管理系统，是谷歌内部容器管理系统Borg的开源版本。Borg系统是谷歌内部使用很多的容器管理系统，在早期是采用Chroot Jail实现安全隔离，后期采用Namespace，资源隔离是采用CGroup实现。为什么谷歌要推出Kube
飞书提供了丰富的api来实现消息的通知，包括文本消息、图片消息、富文本消息，本次介绍使用飞书api发送富文本消息，以下是实现思路飞书API地址：https://open.feishu.cn/document/ukTMukTMukTM/uITNz4iM1MjLyUzM实现思路1.根据正则获取监控项id，需要在动作中定义报警信息2.根据获取的监控项id构造请求获取图片地址，并下载到本地3.需要获取三个
微信公众号：运维开发故事作者：小明1.资源 Controller 主要作用我们知道 k8s 里重要概念之一就是 声明式 API，比如 kubectl apply 就是声明式 API的实现。效果就是资源对象的运行状态要与我们声明的一致。比如kubectl apply 一个 deployment 的 yml，他要求的状态就是: 该 deployment 成功运行。那么问题来了，k8s 是如何 "监视"
微信公众号：运维开发故事作者：冬子先生1. 概述1.1. Yarn基本概念YARN（Yet Another Resource Negotiator）是Hadoop 2.x的一个计算框架，旨在解决Hadoop 1.x中的资源管理和任务调度问题。它的主要目的是将MR1 JobTracker 的两个主要功能（资源管理和作业调度/监控）分离，以便更好地支持多种应用程序，而不是仅支持MapReduce。YA
微信公众号：运维开发故事作者：wanger关于ceph的qosCeph，作为一个高度可扩展的分布式存储系统，已经成为云计算和大数据时代的关键基石。随着企业和组织对数据存储的需求日益增长，Ceph 通过其强大的特性，如可靠性、伸缩性和性能，满足了这些需求。然而，随着集群规模的扩大和工作负载的多样性，如何确保资源的有效分配和性能隔离成为了一个重要议题。在这个背景下，Ceph 的 Quality of
!! 大家好，我是乔克，一个爱折腾的运维工程，一个睡觉都被自己丑醒的云原生爱好者。作者：乔克公众号：运维开发故事博客：www.jokerbai.com背景信息因为产品需要，要在应用端获取到真实的客户端IP，访问链路如下：由于应用前面经过了多次代理，所以默认情况下是获取不到真实IP的。基本概念在实现之前，先简单了解一下常用来获取IP的几个header。remote_addrX-Forwarded-F
微信公众号：运维开发故事作者：wanger现在 Java 17 和 Java 11 基本上可以和 Java8 平分 JDK 装机比例。下面是我常用的一些 Strem API 操作。除了分组、转换、排序，如果大家还有更多常用的 API 可以一起留言交流。分组List 默认分组过后是 Map<Key, List>List<StreamItem> streamList
微信公众号：运维开发故事作者：wanger背景公司环境有台机器硬盘故障，需要安装megacli工具进系统查看raid信息，在ubuntu20.04安装megacli解决依赖过程中失误将高版本的libtinfo包装系统上了，导致系统报glibc对应的版本没有找到，系统实际glibc的版本是2.31。解决办法如果系统的ssh没有断开，可以将原来版本的libtinfo文件删除，并重新软链接cd /lib
!! 大家好，我是乔克，一个爱折腾的运维工程，一个睡觉都被自己丑醒的云原生爱好者。作者：乔克公众号：运维开发故事博客：www.jokerbai.com预期目标Pasted image 20230906090309.png希望在告警通知里有以下数据：告知当前系统还有多少未处理的告警告知当前告警恢复时候的具体值告警通知里增加查看未处理告警的页面链接具体实现要实现上面的需求很简单，夜莺监控的数据库表al
微信公众号：运维开发故事作者：老郑问题描述线上业务高峰期 CPU 飙升，抓取 thread dump 发现 MySQL Statement Cancellation Timer 的线程数比较多，接收到线上预警，分析一下原因。业务高峰：下面是一些可能相关的信息（ mysql 驱动，db 连接池，orm 框架）依赖信息：mysql-jdbc 8.0.24druid 1.2
微信公众号：运维开发故事，作者：瑞华Dockerfile的语法非常简单，然而如何加快镜像构建速度，如何减少Docker镜像的大小却不是那么直观，需要积累实践经验。这篇文章可以帮助你快速掌握编写Dockerfile的技巧。目标更快的构建速度更小的Docker镜像大小更少的Docker镜像层充分利用镜像缓存增加Dockerfile可读性让Docker容器使用起来更简单总结编写.dockerignore
微信公众号：运维开发故事，作者：冬子先生一. 现象在使用nginx反向代理后端服务器的时候，因为配置的是域名，导致HTTPS 请求转发失败，报 SSL 错误，js 报 502imgimg二. 排查过程1、查看nginx日志，发现报502，但是本地curl upstream中的后端域名是可以正常通的img2、查看后端服务器上，没有收到请求，说明请求没过去，继续排查nginx本身的配置问题，Nginx
微信公众号：运维开发故事，作者：老郑Redis 浮点数累计主要是有两个命令INCRBYFLOAT 是 SET 指令的浮点数累计HINCRBYFLOAT 是 HASH 类型的浮点数累计在内部 HINCRBYFLOAT 和 INCRBYFLOAT 自增实现相同。所以我们分析 INCRBYFLOAT 即可。基本使用直接使用指令INCRBYFLOAT mykey 0.1 INCRBYFLOAT mykey
!! 大家好，我是乔克，一个爱折腾的运维工程，一个睡觉都被自己丑醒的云原生爱好者。作者：乔克公众号：运维开发故事博客：www.jokerbai.com最近因为一些原因，需要招一个运维人员，所以就筛选了很多简历，也面了很多人，我发现大家都有一些相同的问题。主要表现在以下几个方面：简历重点不明确会的多，但不精个人规划不清晰下面从这三个方面说说自己的看法。简历重点不明确简历是非常重要的，简历是非常重要的
!! 大家好，我是乔克，一个爱折腾的运维工程，一个睡觉都被自己丑醒的云原生爱好者。作者：乔克公众号：运维开发故事博客：www.jokerbai.com0e1f0f7f3c8a285faecf627b8fed4f5.jpg在 6 月 5 号，唯品会发布了 23 年 3 月 29 号的故障报告，因为南沙 IDC 冷冻系统故障导致唯品会线上商城停止服务，造成了数以亿计的损失（作为小运维的我，瑟瑟发抖）。
微信公众号：运维开发故事，作者：wanger什么是对象存储对象存储以独立的对象的形式管理数据，而不是传统的文件层次结构或块存储的形式。每个对象包括数据、元数据和唯一标识符。元数据是描述数据的信息，比如创建日期、类型和其他相关信息。 主要用于非结构化数据，例如多媒体内容、备份数据、分析数据等，以及任何需要大规模、易于访问和经济有效的数据存储的应用。Amazon S3、Google Clou
微信公众号：运维开发故事，作者：double冬一、概述 目前，有诸如Midjourney等人工智能绘画网站可供大家来免费使用，但是由于是免费资源肯定会在机器性能和使用次数方面有所限制，因此如果能将人工智能绘画工具部署在本地运行就会突破机器性能和使用次数等方面的限制。可能所有人类画师都得发出一句“既生瑜，何生亮”的感叹，因为AI 绘画通用算法Stable Diffusion已然超神，无需美术基础，也
微信公众号：运维开发故事，作者：老郑有一批量的数据，可以按照一个固定的 key 分组并发，但是要保证组内并行的处理。 比如：商城中，不同的用户可以并发下单，但是一个用户只能进行顺序的下单。在全局并发的场景下保证局部有序，保证最小事务单元操作的原子性。针对上面的场景我们可以通过 KeyAffinityExecutor (KeyAffinityExecutor 是一个可以按照指定的
微信公众号：运维开发故事，作者：wanger关于中兴新支点系统中兴新支点操作系统基于Linux稳定内核，分为嵌入式操作系统（NewStart CGEL)、服务器操作系统（NewStart CGSL）、桌面操作系统（NewStart NSDL），经过近10年专业研发团队的积累和发展，产品形成安全加固、自主可控、易用管理的突出优势。目前，中兴新支点操作系统已在国内外各大电信运营商、国有大中型企业及电子
!! 大家好，我是乔克，一个爱折腾的运维工程，一个睡觉都被自己丑醒的云原生爱好者。作者：乔克公众号：运维开发故事博客：www.jokerbai.com开始之前Kubernetes 是一个简单且复杂的系统，简单之处在于其整体架构比较简单清晰，是一个标准的 Master-Slave 模式，如下：但是，它又是一个复杂的系统，不论是 Master 还是 Slave，都有多个组件组合而成，如上图所示：Mas
!! 大家好，我是乔克，一个爱折腾的运维工程，一个睡觉都被自己丑醒的云原生爱好者。作者：乔克公众号：运维开发故事博客：www.jokerbai.com最近因为公司的产研调整，决定将代码仓库从本地的 Gitlab 迁移到云效的 Codeup，不是 Gitlab 不够好，而是 Codeup 在度量、安全等方面比原生的 Gitlab 要好，再则公司的产研管理也迁移到了云效，也为了统一化管理。有同学可能会
!! 大家好，我是乔克，一个爱折腾的运维工程，一个睡觉都被自己丑醒的云原生爱好者。作者：乔克公众号：运维开发故事博客：www.jokerbai.commtail是谷歌开源的一款从应用日志提取 metrics 的工具，它会实时读取应用程序的日志，然后通过自己编写的脚本分析日志，最终生成时间序列的指标，项目地址是：https://github.com/google/mtail。夜莺的Categraf对
!! 大家好，我是乔克，一个爱折腾的运维工程，一个睡觉都被自己丑醒的云原生爱好者。作者：乔克公众号：运维开发故事博客：www.jokerbai.com有没有人和我一样，遇到同样的困惑：当我使用 Prometheus 来搭建监控体系的时候，每当有一个组件需要监控，我就要为其增加一个 exporter，如果有 10 个组件，我就要增加 10 个 exporter，先不说这 10 个 exporter
!! 大家好，我是乔克，一个爱折腾的运维工程，一个睡觉都被自己丑醒的云原生爱好者。作者：乔克公众号：运维开发故事博客：www.jokerbai.com监控是方法，告警是手段，解决是目的。但是，大家有没有遇到这种困惑。我收集了一大堆指标，但是我不知道哪些指标应该告警，也不知道如何把这些告警发送到对应的团队或者个人，更不知道如何做告警升级。我之前用 Prometheus+Altermanager 这一
!! 大家好，我是乔克，一个爱折腾的运维工程，一个睡觉都被自己丑醒的云原生爱好者。作者：乔克公众号：运维开发故事博客：www.jokerbai.com前言可观测性是大部分中小公司比较头疼的问题，主要表现以下几个方面：需要不同的开源软件来组装以实现不同的功能，比如使用 Skywalking 实现链路监控，使用 ELK 实现日志收集监控，使用 Grafana+Prometheus 来实现指标监控。每个
!! 大家好，我是乔克，一个爱折腾的运维工程，一个睡觉都被自己丑醒的云原生爱好者。作者：乔克公众号：运维开发故事博客：www.jokerbai.com前言在当今数字时代，软件系统在我们的生活和工作中发挥着越来越重要的作用。我们需要确保这些系统能够在高负载、高并发的情况下稳定运行，为用户提供良好的体验。为了实现这一目标，我们需要关注系统性能监控指标，洞察系统运行的关键脉搏。本文将从指标分类、指标详细
!! 大家好，我是乔克，一个爱折腾的运维工程，一个睡觉都被自己丑醒的云原生爱好者。作者：乔克公众号：运维开发故事博客：www.jokerbai.comChatGPT什么是 ChatGPTChatGPT 是一个基于人工神经网络技术的自然语言处理模型，由 OpenAI 开发。它可以理解和生成自然语言，用于进行对话、翻译、文本摘要等任务。ChatGPT 是目前最先进的自然语言处理模型之一，它使用了大量的
Copyright © 2005-2024 51CTO.COM 版权所有 京ICP证060544号
