linux cpu占用率如何看
297
2022-10-19
prometheus 容器安装部署
prometheus 容器安装部署
文章目录
1. 背景2 简介3 特点4 组件5 架构6 安装7 启动参数8 配置
8.1 全局配置global8.2 rule_files8.3 scrape_configs配置
9 告警
9.1 格式9.2 参数说明9.3 模板说明
10. prometheus metrics11. promtool工具
1. 背景
TSDB(Time Series Database)时序列数据库，我们可以简单的理解为一个优化后用来处理时间序列数据的软件，并且数据中的数组是由时间进行索引的。
时间序列数据库的特点：
大部分时间都是写入操作。写入操作几乎是顺序添加，大多数时候数据到达后都以时间排序。写操作很少写入很久之前的数据，也很少更新数据。大多数情况在数据被采集到数秒或者数分钟后就会被写入数据库。删除操作一般为区块删除，选定开始的历史时间并指定后续的区块。很少单独删除某个时间或者分开的随机时间的数据。基本数据大，一般超过内存大小。一般选取的只是其一小部分且没有规律，缓存几乎不起任何作用。读操作是十分典型的升序或者降序的顺序读。常见的时间序列数据库
TSDB项目 官网
influxDB | RRDtool | Graphite | OpenTSDB | Kdb+ | Druid | KairosDB | Prometheus | 简介 Prometheus是由SoundCloud开发的开源监控报警系统和时序列数据库(TSDB)。Prometheus使用Go语言开发，是Google BorgMon监控系统的开源版本。 2016年由Google发起Linux基金会旗下的原生云基金会(Cloud Native Computing Foundation), 将Prometheus纳入其下第二大开源项目。Prometheus目前在开源社区相当活跃。 Prometheus和Heapster(Heapster是K8S的一个子项目，用于获取集群的性能数据。)相比功能更完善、更全面。Prometheus性能也足够支撑上万台规模的集群。 3 特点 多维度数据模型。灵活的查询语言。不依赖分布式存储，单个服务器节点是自主的。通过基于HTTP的pull方式采集时序数据。可以通过中间网关进行时序列数据推送。通过服务发现或者静态配置来发现目标服务对象。支持多种多样的图表和界面展示，比如Grafana等。 4 组件 Prometheus生态系统由多个组件组成，它们中的一些是可选的。多数Prometheus组件是Go语言写的，这使得这些组件很容易编译和部署。 Prometheus Server ：主要负责数据采集和存储，提供PromQL查询语言的支持。客户端SDK：官方提供的客户端类库有go、java、scala、python、ruby，其他还有很多第三方开发的类库，支持nodejs、php、erlang等。Push Gateway ：支持临时性Job主动推送指标的中间网关。PromDash：使用Rails开发可视化的Dashboard，用于可视化指标数据。Exporter：Exporter是Prometheus的一类数据采集组件的总称。它负责从目标处搜集数据，并将其转化为Prometheus支持的格式。与传统的数据采集组件不同的是，它并不向中央服务器发送数据，而是等待中央服务器主动前来抓取。Prometheus提供多种类型的Exporter用于采集各种不同服务的运行状态。目前支持的有数据库、硬件、消息中间件、存储系统、HTTP服务器、JMX等。alertmanager： 警告管理器，用来进行报警。prometheus_cli： 命令行工具。其他辅助性工具：多种导出工具，可以支持Prometheus存储数据转化为HAProxy、StatsD、Graphite等工具所需要的数据存储格式。 5 架构 Prometheus Server：用于抓取和存储时间序列化数据Exporters：主动拉取数据的插件Pushgateway：被动拉取数据的插件Altermanager：告警发送模块Prometheus web UI：界面化，也包含结合Grafana进行数据展示或告警发送 6 安装 #测试安装$ docker run -d -p 9090:9090 --name prometheus docker.io/prom/prometheus:latest #配置与数据持久存储部署$ chown -R 65534:65534 /monitor/prometheus/data$ docker run -d -p 9090:9090 -v /monitor/prometheus/config:/etc/prometheus -v /monitor/prometheus/data:/prometheus --name prometheus docker.io/prom/prometheus:latest #定制版安装$ chown -R 65534:65534 /monitor/prometheus/data$ docker run -tid -p 9090:9090 --restart=always -v /monitor/prometheus/config/prometheus:/etc/prometheus:z -v /monitor/prometheus/data:/prometheus:z --name prometheus docker.io/prom/prometheus:latest "--config.file=/etc/prometheus/prometheus.yml" "--storage.tsdb.path=/prometheus" "--web.console.libraries=/usr/share/prometheus/console_libraries" "--web.console.templates=/usr/share/prometheus/consoles" "--storage.tsdb.retention.time=15d" "--storage.tsdb.min-block-duration=6h" "--web.enable-admin-api" "--web.enable-lifecycle" 7 启动参数 -h, --help：显示帮助信息 --version：显示版本信息 --config.file="prometheus.yml"：启动时，指定Prometheus读取配置文件的路径。 --web.listen-address="0.0.0.0:9090" ：指定网页打开Prometheus的ip和端口，默认为"0.0.0.0:9090"。 --web.read-timeout=5m：页面读取请求最大超时时间 。 --web.max-connections=512：同时访问Prometheus页面的最大连接数，默认为512。 --web.external-url=：Prometheus对外提供的url(eg: Prometheus通过反向代理提供服务)。用于生成一个相对和绝对的链接返回给Prometheus本身。如果这个url有路径部分，它将用于Prometheus所有HTTP端点的前缀。如果省略了，则相关的url组件将自动派生(If the URL has a path portion, it will be used to prefix all HTTP endpoints served by Prometheus. If omitted, relevant URL components will be derived automatically)。 --web.route-prefix=：Web端点内部路由的前缀。默认路径：web.external-url。 --web.user-assets=：静态资源路径，可以在/user下找到。 --web.enable-lifecycle：通过HTTP请求启用关闭和重新加载。 --web.enable-admin-api：启用管理控制操作的api端点。(Enables API endpoints for admin control actions) --web.console.templates="consoles"：到控制台模板目录的路径，可以在consoles/目录下找到。 --web.console.libraries="console_libraries"：控制台库目录的路径。 --storage.tsdb.path="data/"：存储的基本路径。 --storage.tsdb.min-block-duration=2h：在持久化之前数据块的最短保存期。 --storage.tsdb.max-block-duration=：在持久化之前数据块的最大保存期(默认为保存期的10%)。 --storage.tsdb.retention=15d：存储采样的保存时间。 --storage.tsdb.no-lockfile：不在数据目录中创建lockfile(Do not create lockfile in data directory)。 --alertmanager.notification-queue-capacity=10000：等待报警通知队列的大小。 --alertmanager.timeout=10s：发送警报到Alertmanager的超时时间。 --query.lookback-delta=5m：允许在表达式求值期间检索度量值的delta差值(The delta difference allowed for retrieving metrics during expression evaluations)。 --query.timeout=2m： 一个查询在终止之前可以执行的最长时间(如果超过2min，就会自动kill掉)。 --query.max-concurrency=20：并发执行的最大查询数，默认为20。 --log.level=info： 开启打印日志级别(debug,info,warn,error,fatal)。默认为info。 配置--web.enable-lifecycle后，API可重载配置文件 curl -X POST 配置 模板 global: scrape_interval: 15s # 采集间隔15s，默认为1min一次 evaluation_interval: 15s # 计算规则的间隔15s默认为1min一次 scrape_timeout: 10s # 采集超时时间，默认为10s external_labels: # 当和其他外部系统交互时的标签，如远程存储、联邦集群时 prometheus: monitoring/k8s # 如：prometheus-operator的配置 prometheus_replica: prometheus-k8s-1alerting: alertmanagers: - static_configs: - targets: - 192.168.211.16:9093rule_files: - "*rules.yml"scrape_configs: - job_name: 'prometheus' static_configs: - targets: ['192.168.211.16:9090'] 8.1 全局配置global global 属于全局的默认配置，它主要包含 4 个属性， scrape_interval: 拉取 targets 的默认时间间隔。默认每隔15秒 scrape_timeout: 拉取一个 target 的超时时间。默认每隔10秒 evaluation_interval: 执行 rules 的时间间隔。监控的评估频率，默认15秒 external_labels: 为指标增加额外的维度，可用于区分不同的prometheus,在应用中多个 prometheus可以对应一个alertmanager 8.2 rule_files 指定告警策略文件 格式： rule_files: - "*rules.yml" 默认情况下Prometheus会每分钟对这些告警规则进行计算，如果用户想定义自己的告警计算周期，则可以通过evaluation_interval来覆盖默认的计算周期。 8.3 scrape_configs配置 scrape_configs 主要用于配置拉取数据节点，每一个拉取配置主要包含以下参数：job_name：任务名称honor_labels： 用于解决拉取数据标签有冲突，当设置为 true, 以拉取数据为准，否则以服务配置为准params：数据拉取访问时带的请求参数scrape_interval： 拉取时间间隔scrape_timeout: 拉取超时时间metrics_path： 拉取节点的 metric 路径scheme： 拉取数据访问协议sample_limit： 存储的数据标签个数限制，如果超过限制，该数据将被忽略，不入存储；默认值为0，表示没有限制relabel_configs： 拉取数据重置标签配置metric_relabel_configs：metric 重置标签配置 示例：重定义标签，将__address__改为ip - job_name: 'node-exporter' static_configs: - targets: - '192.168.1.193:9100' relabel_configs: - source_labels: [__address__] regex: (.+):(.+) target_label: __tmp_ip replacement: ${1} - source_labels: [__tmp_ip] regex: (.*) target_label: ip replacement: ${1} 9 告警 9.1 格式 groups: - name: example rules: - alert: HighErrorRate expr: job:request_latency_seconds:mean5m{job="myjob"} > 0.5 for: 10m labels: severity: page annotations: summary: High request latency description: description info 9.2 参数说明 在告警规则文件中，我们可以将一组相关的规则设置定义在一个group下。在每一个group中我们可以定义多个告警规则(rule)。一条告警规则主要由以下几部分组成： alert：告警规则的名称。expr：基于PromQL表达式告警触发条件，用于计算是否有时间序列满足该条件。for：评估等待时间，可选参数。用于表示只有当触发条件持续一段时间后才发送告警。在等待期间新产生告警的状态为pending。labels：自定义标签，允许用户指定要附加到告警上的一组附加标签。severity：设置告警级别，例如：正常、告警、错误、严重、紧急等。annotations：用于指定一组附加信息，比如用于描述告警详细信息的文字，内容在告警产生时会一同作为参数发送到Alertmanager。info：内容在告警产生时会一同作为参数发送到Alertmanagersummary：支持特定的匹配规则，将内容发送Alertmanagerdescription：内容在告警产生时会一同作为参数发送到Alertmanager 9.3 模板说明 # To insert a firing element's label values:{{ $labels. }}# To insert the numeric expression value of the firing element:{{ $value }} 示例： groups:- name: example rules: # Alert for any instance that is unreachable for >5 minutes. - alert: InstanceDown expr: up == 0 for: 5m labels: severity: page annotations: summary: "Instance {{ $labels.instance }} down" description: "{{ $labels.instance }} of job {{ $labels.job }} has been down for more than 5 minutes." 10. prometheus metrics arp 域名解析/proc/net/arp. bcache缓存 /sys/fs/bcache/. bonding 绑定conntrack 链接跟踪模块 /proc/sys/net/netfilter/ present). xcpu diskstats磁盘进出进程 disk I/O edac 错误校检与纠正entropy 熵exec 执行程序 filefd 公开文件描述符 /proc/sys/fs/file-nr.filesystem 文件系统 disk space used. hwmon 硬件与传感器 /sys/class/hwmon/. xinfiniband 无线带宽技术ipvs /proc/net/ip_vs and /proc/net/ip_vs_stats. loadavg 平均负载mdadm /proc/mdstat (does nothing if no /proc/mdstat present) 设备meminfo Exposes memory statistics. Darwin, Dragonfly, FreeBSD, Linux, OpenBSDnetdev Exposes network interface statistics such as bytes transferred. Darwin, Dragonfly, FreeBSD, Linux, OpenBSDnetstat Exposes network statistics from /proc/net/netstat. This is the same information as netstat -s. Linuxnfs Exposes NFS client statistics from /proc/net/rpc/nfs. This is the same information as nfsstat -c. Linuxnfsd Exposes NFS kernel server statistics from /proc/net/rpc/nfsd. This is the same information as nfsstat -s. Linuxsockstat Exposes various statistics from /proc/net/sockstat. Linuxstat Exposes various statistics from /proc/stat. This includes boot time, forks and interrupts. Linuxtextfile Exposes statistics read from local disk. The --collector.textfile.directory flag must be set. anytime Exposes the current system time. anytimex Exposes selected adjtimex(2) system call stats. Linuxuname Exposes system information as provided by the uname system call. Linuxvmstat Exposes statistics from /proc/vmstat. Linuxwifi Exposes WiFi device and station statistics. Linuxxfs Exposes XFS runtime statistics. Linux (kernel 4.4+)zfs Exposes ZFS performance statistics. LinuxDisabled by defaultName Description OSbuddyinfo Exposes statistics of memory fragments as reported by /proc/buddyinfo. Linuxdevstat Exposes device statistics Dragonfly, FreeBSDdrbd Exposes Distributed Replicated Block Device statistics (to version 8.4) Linuxinterrupts Exposes detailed interrupts statistics. Linux, OpenBSDksmd Exposes kernel and system statistics from /sys/kernel/mm/ksm. Linuxlogind Exposes session counts from logind. Linuxmeminfo_numa Exposes memory statistics from /proc/meminfo_numa. Linuxmountstats Exposes filesystem statistics from /proc/self/mountstats. Exposes detailed NFS client statistics. Linuxntp Exposes local NTP daemon health to check time anyqdisc Exposes queuing discipline statistics Linuxrunit Exposes service status from runit. anysupervisord Exposes service status from supervisord. anysystemd Exposes service and system status from systemd. Linuxtcpstat Exposes TCP connection status information from /proc/net/tcp and /proc/net/tcp6. (Warning: the current version has potential performance issues in high load situations.) Linux 11. promtool工具 检查metrics curl -s | promtool check metrics 检查配置文件 promtool check config /etc/prometheus/prometheus.yml 检查告警策略文件 promtool check rules /path/to/example.rules.yml 参考资料： 运维之美 版权声明：本文内容由网络用户投稿，版权归原作者所有，本站不拥有其著作权，亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容，请联系我们jiasou666@gmail.com 处理，核实后本网站将在24小时内删除侵权内容。
相关文章
 发表评论 |
暂时没有评论，来抢沙发吧~