SRE文档1. Prometheus 简介
Prometheus 是由前 Google 工程师从 2012 年开始在 Soundcloud 以开源软件的形式进行研发的系统监控和告警工具包，自此以后，许多公司和组织都采用了 Prometheus 作为监控告警工具。Prometheus 的开发者和用户社区非常活跃，它现在是一个独立的开源项目，可以独立于任何公司进行维护。为了证明这一点，Prometheus 于 2016 年 5 月加入 CNCF 基金会，成为继 Kubernetes 之后的第二个 CNCF 托管项目。
- 发布史
2. Prometheus特点
1.易于管理
Prometheus核心部分只有一个单独的二进制文件，不存在任何的第三方依赖（例如数据库、缓存等）。唯一需要的就是本地磁盘，因此不会有潜在的级联故障的风险。
2.强大的数据模型
所有采集的监控数据均以指标（metric）的形式保存在内置的时间序列数据库（TSDB）中。所有的样本除了基本的指标名称以外，还包含一组用于描述该样本特征的标签
3.强大的查询语言PromQL
Prometheus内置了一个强大的数据查询语言PromQL。通过PromQL可以实现对监控数据的查询、聚合。同时PromQL也被应用于数据可视化（如Grafana）以及告警当中。
4.高效
对于监控系统而言，大量的监控任务必然导致有大量的数据产生，而Prometheus可以高效地处理这些数据。对于单一Prometheus Server实例而言，它可以处理：
数以百万的监控指标
每秒处理数十万的数据点
5.可扩展
可以在每个数据中心、每个团队运行独立的Prometheus Server。Prometheus对于联邦集群的支持，可以让多个Prometheus实例产生1个逻辑集群。当单个Prometheus Server处理的任务量过大时，通过使用功能分区（sharding）+联邦集群（federation），可以对其扩展。
6.易于集成
使用Prometheus可以快速搭建监控服务，并且可以非常方便地在应用程序中进行集成。
7.可视化
Prometheus Server中自带的Prometheus UI，基于Prometheus提供的API还可以实现自己的监控可视化UI，也可以结合grafana进行展示
8.开放性
通常来说当我们需要监控一个应用程序时，一般需要该应用程序提供对相应监控系统协议的支持，因此应用程序会与所选择的监控系统进行绑定。为了减少这种绑定所带来的限制，对于决策者而言要么你就直接在应用中集成该监控系统的支持，要么就在外部创建单独的服务来适配不同的监控系统。
而对于Prometheus来说，使用Prometheus的client library的输出格式不止支持Prometheus的格式化数据，也可以输出支持其它监控系统的格式化数据，比如Graphite。 因此你甚至可以在不使用Prometheus的情况下，采用Prometheus的client library来让你的应用程序支持监控数据采集。
3. Prometheus生态圈组件
| 组件名字 | 描述 |
|---|---|
| Prometheus Server | 主服务器，负责收集和存储时间序列数据 |
| Client libraries | 应用程序代码插桩，将监控指标嵌入到被监控应用程序中 |
| Pushgateway | 推送网关，为支持short-lived作业提供一个推送网关 |
| Exporter | 为一些应用开发的数据摄取组件-exporter，例如：HAProxy、StatsD、Graphite等 |
| Altermanager | 专门用于处理alert的组件 |
4. Prometheus架构
4.1大致分为三类
采集层：
采集层分为2类，一类是生命周期较短的作业，还有一类市生命周期较长的作业：
| 生命周期 | 描述 |
|---|---|
| 短作业（例如executor） | 直接通过API，在退出时间指标推送给Pushgateway |
| 长作业 | Retrieval组件直接从Job或者Exporter拉取数据 |
存储层：
| 名称 | 描述 |
|---|---|
| Prometheus Server | 包含了存储引擎和计算引擎 |
| Retrieval组件为取数组件 | 主动从Pushgateway或者Exporter拉取指标数据 |
| Service discovery | 可以动态发现要监控的目标 |
| TSDB | 数据核心存储与查询 |
| HTTP server | 对外提供HTTP服务 |
应用层：
应用层主要分为2种，一种是AlertManager，另一种是数据可视化。
| 应用名字 | 描述 |
|---|---|
| AlertManager | 对接报警 |
| 数据可视化 | grafana或者Prometheus WebUI |
https://erdong.site/prometheus-notes/chapter01-Basic/1.1-prometheus-introduction.html
https://www.cnblogs.com/panwenbin-logs/p/18396013
https://www.cnblogs.com/kevingrace/p/11151649.html
https://cloud.tencent.com/document/product/1416/56011
视频：
https://www.youtube.com/watch?v=h4Sl21AKiDg
https://www.youtube.com/watch?v=rx6CPDK_5mU&list=PLy_6D98if3ULEtXtNSY_2qN21VCKgoQAE