分布式服务器监控工具NebulaSolarDash 详细介绍:github: https://github.com/toddlerya/NebulaSolarDash#readme 工具分为客户端和服务端两部分: 服务端使用了 bottle 来作为 Web 框架,Echarts 来渲染生成图表;客户端使用 Pyt
转载
2024-08-08 11:01:22
38阅读
随着智能化、万物互联时代的快速发展,数据量开始暴增,一方面我们需要开始思考如何高效可靠地存储海量的数据,另一方面我们还需要对这些数据进行分析处理,以获得更多有价值的信息。这时期我们就需要用到Hadoop了。 Hadoop是Apache软件基金会下一个开源分布式计算平台,以hdfs(Hadoop Distributed File System)、MapReduce(Hadoop2.0加入
转载
2023-07-13 16:59:39
47阅读
一、Ceph简单介绍1)OSDs:2)Monitors:Ceph的监控保持集群状态映射,包括OSD(守护进程)映射,分组(PG)映射,和CRUSH映射。 Ceph 保持一个在Ceph监视器, Ceph OSD 守护进程和 PG的每个状态改变的历史(称之为“epoch”)。3)MDS:Ceph把客户端的数据以对象的形式存储到了存储池里。利用CRUSH算法,Ceph可以计算出安置组所包含的
浅谈分布式架构搭建基础理念技术选型后端技术设计总体架构设计关键案例设计 架构师搭建架一般优先考虑的是安全性、稳定性、高吞吐量。哈哈,菜鸟的我让我装个B,回忆一下以前架构搭建 基础理念 CAP(一致性、可用性、分区容错性)是没法三者均做到,最多能实现两个。在系统搭建是,这里系统搭建探讨优先考虑几个点,由高到低为安全性、稳定性、高吞吐量(系统方案的讨论
转载
2023-08-30 11:21:07
35阅读
2018年的最后几天平台迭代到了V6版本,代号Veronica(维罗妮卡)。(Veronica名字取自电影复仇者联盟2,电影中的Veronica是由布鲁斯·班纳(绿巨人)和托尼·斯塔克(钢铁侠)共同完成,Veronica系统包含多个功能模块,反浩克装甲是其中之一,反浩克装甲的作用相当于外勤特工,其余功能模块起着支持、补给作用。除反浩克外其余已知的功能模块包括:独立卫星通信,独立操作,战损支持(出现
转载
2024-07-20 09:41:58
53阅读
pdsh的全称是parallel distributed shell,与pssh类似,pdsh可并行执行对远程目标主机的操作,在有批量执行命令或分发任务的运维需求时,使用这个命令可达到事半功倍的效果。同时,pdsh还支持交互模式,当要执行的命令不确定时,可直接进入pdsh命令行,非常方便。一、 pdsh应用场景 pdsh的应用场景基本上与pssh相同,都用于大批量服务器的配置、部署、文件复制等运维
推荐
原创
2014-09-09 13:51:20
10000+阅读
点赞
7评论
中低压分布式电源并网方案(RCL0923群调群控协同控制终端/RCL0923A分布式光伏逆变器数据采集器)方案中低压分布式电源并网方案(RCL0923群调群控协同控制终端/分布式光伏逆变器数据采集器)方案RCL0923分布式光伏电源群调群控协调控制终端/分布式光伏逆变器数据采集器方案一至方案四区别方案 方案一采用RCL0923群调群控协同控制终端 方案二采用RCL0923群调群控协同控制终端 方案
块存储:典型设备;磁盘阵列,硬盘作用:主要是将裸磁盘空间映射给主机使用,磁盘阵列(内含多块硬盘)做RAID操作或者LVM操作,逻辑划分出N块Logic盘并映射给主机使用,操作系统会识别到N块硬盘,但是无法感知到底是逻辑盘还是物理盘,所以还是会对其进行分区和格式化(无法共享数据)。每块逻辑盘实际上是由多块硬盘共同组成,在读写数据的时候,几块物理硬盘可以并行寻址和操作,大大提高了IO效率。优点:对块磁
转载
2024-09-04 09:22:38
47阅读
pdsh的全称是parallel distributed
shell,与pssh类似,pdsh可并行执行对远程目标主机的操作,在有批量执行命令或分发任务的运维需求时,使用这个命令可达到事半功倍的效果。同时,pdsh还支持交互模式,当要执行的命令不确定时,可直接进入pdsh命令行,非常方便。一、pdsh应用场景 pds
原创
2017-03-12 10:33:56
2123阅读
点赞
1评论
随着互联网的飞速发展,人类社会的数据量迅速激增。据统计,目前人类一年产生的数据相当于人类进入现代化以前所有历史的总和。如果在这数据爆发的关键时刻,系统不稳定或无法访问,那么对于业务而言将会是毁灭性的打击。采用应用系统分布式构建,可以更好的解决此问题。
推荐
原创
2021-11-15 15:41:47
10000+阅读
点赞
7评论
作者:洪斌爱可生南区负责人,MySQL ACE 数据库行业老兵。dble 作为 MySQL 流⾏的分布式开源中间件,在性能、稳定性、可⽤性已经过⼤规模用户使⽤考验,成为许多用户替换 mycat 不⼆之选。作为 MySQL DBA 熟悉 dble ⽤法和运维⼿段,是掌握 MySQL 分布式架构的必备技能之⼀,这⾥我们整理了⼀些常⽤的运维命令,在你运维过程中能帮你快速诊断重要信息。dble 有两个访问
原创
2022-12-20 15:08:22
254阅读
应用系统分布式构建运维 部署主从数据库 基础环境安装 准备两台主机 修改主机名 # hostnamectl set-hostname mysql1 # hostnamectl set-hostname mysql2 关闭防火墙及SELinux服务(两个节点) # setenforce 0 # sys ...
转载
2021-04-23 22:26:06
190阅读
2评论
分布式运维重点k8s
Kubernetes(K8S)是一个开源的容器编排引擎,用于自动化容器部署、扩展和管理。在分布式系统中,K8S扮演着非常重要的角色,可以帮助我们实现更高效、稳定的运维管理。下面将介绍如何在K8S上实现分布式运维的重点。
整体流程
下面是实现分布式运维重点k8s的整体流程:
| 步骤 | 操作
原创
2024-03-07 13:09:59
37阅读
常见问题nearfull osd(s) or pool(s) nearfull 此时说明部分osd的存储已经超过阈值,mon会监控ceph集群中OSD空间使用情况。如果要消除WARN,可...
转载
2021-07-18 17:59:58
835阅读
# 分布式光伏运维平台技术架构实现指南
在如今日益重视可再生能源的时代,分布式光伏运维平台得到了广泛关注。建设这样一个平台需要我们将多个技术组件无缝集成,以保证系统的高效、可靠运行。本文将为刚入行的小白提供一个详细的技术架构实现指南。
## 整体流程
在实现分布式光伏运维平台的过程中,通常可以分为以下几个步骤:
| 步骤 | 描述 |
原创
2024-10-16 04:01:13
227阅读
一、分布式监控 Zabbix通过Zabbix proxies为IT基础设施提供有效和可用的分布式监控 代理(proxies)可用于代替Zabbix server本地收集数据,然后将数据报告给服务器。常用的监控架构平台 1、server-agentd模式: 这个是最简单的架构了,常用于监控主机比较少的情况下。 2、server-proxy-agentd模式: 这个常用于比较多的机器,使用proxy进
近日,邮储银行新一代分布式核心运维平台成功投产上线,这是继邮储银行新一代分布式核心系统技术平台上线之后,取得的又一项重要阶段性成果。作为邮储银行全行一体化运维体系的重要组成部分,...
转载
2022-03-01 15:54:03
208阅读
1、集中式存储向分布式存储的转型,有哪些技术难点和运维管理困难?转型前期、中期和后期都有哪些注意的要点,对于渠道类、账务类和数据报送类业务,如何合理、分批次进行转型?@zhuqibs Mcd 软件开发工程师: 技术难度: io的读写,集中存储中数据只要写入一个磁阵就算成功了,分布式存储中是写入大部分的节点才算成功,如果写入全部节点IO性能有影响,写入少量节点即是写入失败。运维困难:监控上,要采用
原创
2021-05-02 21:05:39
1620阅读
本文实现了使用mogilefs来实现分布式存储。
原创
精选
2017-11-28 15:02:19
866阅读
点赞
引言我在一家银行的科技公司做运维工程师,前几天和北极熊一起吃饭,聊到我们在存储选择方面踩到的一些坑,北极熊建议我写一篇文章和读者分享下。经常读云技术上的技术文章,这次记录下我们在选择存储方面踩的一些坑,也算是回馈。因为行里有要求,所以隐去了我们行的名称和具体运行的业务,请大家见谅。一、存储的挑战:多场景,高可靠,高性能先简单介绍下基本情况,我们属于银行的科技公司,移动支付及新金融的发展给银行带来了
原创
2021-05-12 14:45:39
361阅读