Zabbix是一个企业级的开源分布式监控解决方案，Zabbix软件可以自由下载使用，运作团队靠提供收费的技术支持赢利。官方网站为http://www.zabbix.com，官方文档为https://www.zabbix.com/documentation/3.0/，Zabbix通过C/S模式采集数据，通过B/S模式在web端展示和配置。Zabbix由Zabbix Server和Zabbix Age
转载
2023-06-05 15:01:04
100阅读
大规模分布式Zabbix架构
### 1. 引言
随着云计算和大数据技术的快速发展，现代企业面临着越来越多的IT系统和网络设备的监控需求。而Zabbix作为一款开源的监控系统，在企业中得到了广泛的应用。然而，在大规模的环境中，单个Zabbix服务器往往难以满足高可用性和稳定性的要求。因此，本文将介绍一种大规模分布式Zabbix架构的设计和实现方法，以满足企业对监控系统的需求。
### 2.
原创
2023-09-12 17:52:41
69阅读
目录第1章 概述1.1 分布式存储概念1.2 分布式存储分类第1章 概述相比传统的分布式系统，互联网公司的分布式系统具有两个特点：
1.规模大
2.成本低1.1 分布式存储概念 大规模分布式存储系统的定义如下：
“分布式存储系统是大量普通PC服务器通过Internet互联，作为一个整体对外提供存储服务” 分布式存储系统有如下几个特性：
☐可扩展。随着集群规模的增长，系统整体性能表现
转载
2023-07-02 21:21:33
102阅读
1、市场分析 对于中国分布式存储市场规模有多大？这其实也是一个很难准确回答的问题。 “一来分布式存储市场参与的厂商很多，其中很多厂商不是上市企业，没有办法获得销售数据；二来分布式存储没有一个市场可以普遍接纳的定义和分类，会导致数据统计口径混乱，例如分布式存储是否包括去中心化存储、是否包括超融合、是否包括云存储、内涵与界定的不同，市场规模自然也不一样。”
文章目录并行分布式计算 并行算法常用设计技术划分设计技术均匀划分 - PSRS方根划分- Valiant 归并算法对数划分功能划分分治设计技术双调归并网络凸包问题平衡树设计技术求最大值前缀和倍增设计技术表序问题流水线设计技术卷积 并行分布式计算 并行算法常用设计技术这里讲了很多经典并行算法~划分设计技术均匀划分 - PSRS 个元素， 台处理器，直接将 个元素分割为 端，每段含 MIMD 模
如何实现大规模并行分布式深度学习成为深度学习的研究热点，从而成为推动算法创新的关键的人工智能工程能力。
转载
2022-04-25 11:32:46
558阅读
分布式系统的基础理论： 分布式系统：多台机器通过网络连接在一起，作为一个整体为上层提供服务。 一、基础理论知识：数据分布、复制、一致性、容错。 1、异常 （1）服务器宕机（内存错误，服务
转载
2017-11-29 14:07:00
169阅读
2评论
人工智能大数据与深度学习 公众号： weic2c近年来，随着“大”数据及“大”模型的出现，学术界和工业界对分布式机器学习算法引起了广泛关注。针对这一刚需，阿里集团和蚂蚁金服设计了自己的分布式平台——鲲鹏。鲲鹏结合了分布式系统及并行优化算法，解决了大规模机器学习算法带来的一系列问题
原创
2022-04-21 11:45:42
913阅读
人工智能大数据与深度学习 公众号： weic2c近年来，随着“大”数据及“大”模型的出现，学术界和工业界对分布式机器学习算法引起了广泛关注。针对这一刚...
转载
2021-10-26 11:17:48
1229阅读
引言本文为GNN教程的DGL框架之大规模分布式训练，前面的文章中我们介绍了图神经网络框架DGL如何利用采样的技术缩小计算图的规模来通过mini-batch的方式训练模型，当图特别大的时候，非常多的batches需要被计算，因此运算时间又成了问题，一个容易想到解决方案是采用并行计算的技术，很多worker同时采样，计算并且更新梯度。这篇博文重点介绍DGL的并行计算框架。多进程方案概括而言，目前DGL
原创
2021-02-04 19:19:26
988阅读
Cloudata 是一个分布式的大规模结构化数据存储解决方案，是 Google Bigtable 的开源 Java 实现。它是 DBMS(Database Management System) ，但不是关系型 DBMS，可存储超过 P 级的数据。数据模型：组件模型：特性：
基本数据服务
单行操作(get, put)多行操作(like, between, scanner)数据上传(DirectUp
转载
2013-03-12 09:36:00
178阅读
2评论
本文主要介绍DGL的并行计算框架。
原创
2022-09-28 16:06:50
300阅读
好久没来写博客了，去年弄的一个zabbix分布式架构的生产环境，过来分享一下
原创
2019-04-06 15:24:31
4111阅读
系统功能实现：项目成功实现了数据输入、数据处理、评估和结果分析等功能模块，展示了分布式架构在数据处理和分析中的应
分布式大规模数据处理MapReduce首先，在Google数据中心会有大规模数据需要处理，比如被网络爬虫（Web Crawler）抓取的大量网页等。由于这些数据很多都是PB级别，导致处理工作不得不尽可能的并行化，而Google为了解决这个问题，引入了MapReduce这个编程模型，MapReduce是源自函数式语言，主要通过"Map（映射）"和"Reduce（化简）"这两个步骤来并行处理大规模的数
转载
2024-01-28 05:34:15
65阅读
下载greenplum-db-5.23.0-rhel7-x86_64.bin安装包 个人百度网盘地址：链接：https://pan.baidu.com/s/1YCIo9vS0fSfi6pHwDLL5KQ 提取码：jmr6简单记录一下安装mpp(greenplum)的过程，以及遇到的问题。不喜勿喷简单来说GPDB是一个分布式数据库软件，其可以管理和处理分布在多个不同主机上的海量数据。对于GPDB来说
转载
2023-10-07 19:47:12
73阅读
云时代的应用性能测试面对传统性能测试工具性能不足，自研技术门槛高；瓶颈在各微服务间漂移，测试技术难度大；如何摸清资源扩容模型，有限资源下如何验证性能；一旦性能问题流入现网，问题定位周期长等挑战。如何更加系统的开展性能测试活动？
转载
2018-12-27 18:53:14
1410阅读
当前各种 RPC 中间件技术已经广泛应用于各个领域。其中，服务器之间消息通讯这种功能广泛应用于这些中间件中，
转载
2022-05-07 15:29:57
184阅读
一、架构我们设计的这个分布式是典型的CS架构，也就是分为服务器端和客户端。服务器端我们称为“爬虫Server”，客户端称为“爬虫Client”。爬虫Server，负责管理所有URL（即，爬虫客户端的下载任务）的状态，通过我们前面介绍的UrlPool（网址池）进行管理。还不知道UrlPool的同学可以搜索我们前面的文章，或者到《猿人学网站》上去看“Python爬虫教程”找到UrlPool的讲解。Se
原创
2020-12-31 21:18:33
895阅读
Zabbix介绍及部署(超详细讲解)入门小站 收录于合集#Linux651个#Zabbix1个入门小站
分享运维技巧及10k+Stars的开源项目一、[zabbix]的基本概述zabbix 是一个监控软件，其可以监控各种网络参数，保证企业服务架构安全运营，同时支持灵活的告警机制，可以使得运维人员快速定位故障、解决问题。zabbix 支持分布式功能，支持复杂架构下的监控解决方案，也支持 w
转载
2023-07-16 22:59:32
120阅读
1评论
