系统监控——prometheus的部署
- 一、prometheus简介
- 1、优点
- 2、组件
- 3、架构
- 二、环境包准备
- 三、安装运行
- 四、网页访问
- 五、安装图形化界面
一、prometheus简介
prometheus 是一套开源的系统监控报警框架。
1、优点
- 强大的多维度数据模型
- 灵活而强大的查询语句(PromQL):在同一个查询语句,可以对多个 metrics 进行乘法、加法、连接、取分数位等操作。
- 易于管理: Prometheus server 是一个单独的二进制文件,可直接在本地工作,不依赖于分布式存储。
- 高效:平均每个采样点仅占 3.5 bytes,且一个 Prometheus server 可以处理数百万的 metrics。
- 使用 pull 模式采集时间序列数据,这样不仅有利于本机测试而且可以避免有问题的服务器推送坏的 metrics。
- 可以采用 push gateway 的方式把时间序列数据推送至 Prometheus server 端
- 可以通过服务发现或者静态配置去获取监控的 targets。
- 有多种可视化图形界面。
- 易于伸缩。
2、组件
Prometheus 生态圈中包含了多个组件,其中许多组件是可选的:
- Prometheus Server: 用于收集和存储时间序列数据。
- Client Library:客户端库,为需要监控的服务生成相应的 metrics 并暴露给 Prometheus server。当 Prometheus server 来 pull 时,直接返回实时状态的 metrics。
- Push Gateway: 主要用于短期的 jobs。由于这类 jobs 存在时间较短,可能在 Prometheus 来 pull 之前就消失了。为此,这次 jobs 可以直接向 Prometheus server 端推送它们的 metrics。这种方式主要用于服务层面的 metrics,对于机器层面的 metrices,需要使用 node exporter。
- Exporters: 用于暴露已有的第三方服务的 metrics 给 Prometheus。
- Alertmanager: 从 Prometheus server 端接收到 alerts 后,会进行去除重复数据,分组,并路由到对收的接受方式,发出报警。常见的接收方式有:电子邮件,pagerduty,OpsGenie, webhook 等。
3、架构
从这个架构图,也可以看出 Prometheus 的主要模块包含, Server, Exporters, Pushgateway, PromQL, Alertmanager, WebUI 等。
它大致使用逻辑是这样:
- Prometheus server 定期从静态配置的 targets 或者服务发现的 targets 拉取数据。
- 当新拉取的数据大于配置内存缓存区的时候,Prometheus 会将数据持久化到磁盘(如果使用 remote storage 将持久化到云端)。
- Prometheus 可以配置 rules,然后定时查询数据,当条件触发的时候,会将 alert 推送到配置的 Alertmanager。
- Alertmanager 收到警告的时候,可以根据配置,聚合,去重,降噪,最后发送警告。
- 可以使用 API, Prometheus Console 或者 Grafana 查询和聚合数据。
二、环境包准备
1、下载最新版的服务端prometheus
和客户端node_exporter
- 客户端:https://prometheus.io/download/#node_exporter
- 2、下载GO语言环境包
wget https://storage.googleapis.com/golang/go1.8.3.linux-amd64.tar.gz
三、安装运行
- 服务端
1、解压go语言包并将其添加至环境变量
tar -C /usr/local -zxf go1.8.3.linux-amd64.tar.gz
echo "export PATH=$PATH:/usr/local/go/bin" >> /etc/profile
source /etc/profile ##更新环境
2、解压Prometheus安装包并建立软链接
tar -zxf prometheus-2.28.1.linux-amd64.tar.gz -C /usr/local/
ln -sv /usr/local/prometheus-2.28.1.linux-amd64/ /usr/local/Prometheus
3、编辑prometheus配置文件
- 修改监听地址为本机9090端口,新增节点端口9100
vim /usr/local/prometheus-2.28.1.linux-amd64/prometheus.yml
4、后台运行prometheus
/usr/local/Prometheus/prometheus --config.file=/usr/local/Prometheus/prometheus.yml &
- 客户端
5、解压node_exporter,并移动至/usr/local
目录
tar -zxvf node_exporter-1.2.2.linux-amd64.tar.gz -C /usr/local/
mv /usr/local/node_exporter-1.2.2.linux-amd64/ /usr/local/node_exporter
6、后台运行node_exporter
/usr/local/node_exporter/node_exporter &
四、网页访问
curl 172.25.36.1:9090
查看监控的两个目标
查看其中一个目标的信息
五、安装图形化界面
- 任意主机下载部署(本次选择server2主机)
1、下载grafana的最新版
下载地址:https://grafana.com/grafana/download
wget https://dl.grafana.com/oss/release/grafana-8.1.0-1.x86_64.rpm
2、下载应用,并启动
sudo yum install grafana-8.1.0-1.x86_64.rpm -y
systemctl enable grafana-server
systemctl start grafana-server
3、访问
访问 IP + Port,grafana 默认的启动 port 是 3000,初始账号和密码都是 admin
访问出错,不知如何解决,如有大佬了解,希望留言提醒,谢谢!