Java web应用性能分析之【prometheus监控K8s指标说明】

常规k8s的监控指标

单独

1、集群维度

  • 集群状态
  • 集群节点数
  • 节点状态（正常、不可达、未知）
  • 节点的资源使用率（CPU、内存、IO等）

2、应用维度

  • 应用响应时间

  • 应用的错误率

  • 应用的请求量

3、系统和集群组件维度

  • API服务器状态
  • 控制器状态
  • etcd状态

常用的 Prometheus Operator 指标

        常用监控 Kubernetes 性能的 Prometheus Operator 指标 如下：

  1. Kubernetes 资源相关
  2. Kubernetes 存储相关
  3. kubernetes system 相关
  4. APIServer 相关
  5. kubelet 相关
  6. 集群组件
  7. 应用相关
  8. 节点相关
  9. Etcd 相关
  10. CoreDNS 相关

1、集群维度

        K8s集群指标可以按维度分为节点指标和容器pod指标。

  • 节点维度指标包括节点CPU使用率，节点内存使用率等

  • pod维度指标包括pod CPU 使用率等

1.1 Node监控


1、内存指标
 

node_memory_MemTotal_bytes： Node总内存大小

node_memory_MemAvailable_bytes：Node剩余可用内存

node_memory_MemAvailable_bytes ：从应用程序的角度看到的可用内存；linux 内核为了提升磁盘操作的性能，会消耗一部分内存去缓存磁盘数据。就是buffer和cache，对于内核来说 buffer和cache 都属于已经被使用的内存，只是应用程序需要内存时，如果没有足够的free内存可用，内核就会从buffer和cache中回收内存满足应用程序的请求。所以从应用程序角度来说avaliable = free + buffer +cache, 不过这只是一个理想的公式，实际中的数据会有较大偏差

node已用的内存大小计算公式：

node_memory_MemTotal_bytes - node_memory_MemAvailable_bytes

理想情况下节点内存使用率可以 这样计算：

(1-(node_memory_Buffers_bytes+node_memory_Cached_bytes+node_memory_MemFree_bytes)/node_memory_MemTotal_bytes)*100
或者使用以下计算方式：

(1-node_memory_MemAvailable_bytes/node_memory_MemTotal_bytes)*100



2、CPU

node_load1：CPU1分钟负载

node_load5：CPU5分钟负载

node_load15：CPU15分钟负载

node_cpu_seconds_total (counter类型指标，用来统计CPU每种模式下所花费的时间，是CPU时间片的一个累积值)

CPU使用率计算公式：

1-avg(irate(node_cpu_seconds_total{mode="idle"}[30m])) by (instance)


如果需要计算node节点CPU使用率：CPU使用率是cpu除空闲(idle)状态之外的其他所有CPU状态的时间总和除以总的CPU时间得到的结果。即：

(1-sum(rate(node_cpu_seconds_total{mode="idle"}[1m]))by(instance)/sum(rate(node_cpu_seconds_total[1m]))by(instance))*100


如果需要采集节点vcpu指标信息：例如4u的一个节点，监控每个u的使用率，可参考公式:

(1-sum(rate(node_cpu_seconds_total{mode="idle"}[1m]))by(instance,cpu)/sum(rate(node_cpu_seconds_total[1m]))by(instance,cpu))*100



3、分区使用

nodenode_filesystem_size_bytes：各个分区总空间

node_filesystem_avail_bytes：各分区剩余空间


4、磁盘I/O

node_disk_io_time_seconds_total：磁盘I/O操作耗费时间

每秒磁盘读取速度：
irate(node_disk_writes_completed_total[30m])

每秒磁盘写入速度：
irate(node_disk_written_bytes_total[30m])

每秒磁盘I/O操作耗费时间计算公式：
irate(node_disk_io_time_seconds_total[30m])

每次I/O读取耗时计算公式：
irate(node_disk_read_time_seconds_total[30m]) / irate(node_disk_reads_completed_total[30m])

每次I/O写入耗时计算公式：
irate(node_disk_write_time_seconds_total[30m]) / irate(node_disk_writes_completed_total[30m])


磁盘IO表示磁盘的输入和输出（向磁盘写入数据，从磁盘读取数据）

node_disk_reads_completed_total：读IO

node_disk_writes_completed_total ：写IO

sumby(instance)(rate(node_disk_reads_completed_total[5m]))

sumby(instance)(rate(node_disk_writes_completed_total[5m]))


节点磁盘监控，主要说明下磁盘空间使用率相关指标，磁盘使用率通常是指挂载在某个目录的磁盘分区的使用率。一个磁盘分区会由对应的文件系统进行管理，通过该文件系统就能获取到该分区的使用情况。

node_filesystem_avail_bytes 磁盘可用空间

node_filesystem_size_bytes 磁盘总空间

K8s集群中磁盘使用率可以这样计算：

1-(node_filesystem_avail_bytes{fstype="ext4"})/(node_filesystem_size_bytes{fstype="ext4"})
不同的磁盘文件分区，磁盘使用情况不一样，一般关注容器引擎空间和pod容器空间的使用率：


5、网络流量

网络流量下载统计计算公式：
irate(node_network_receive_bytes_total{device!~'tap.*|veth.*|br.*|docker.*|virbr*|lo*'}[30m])*8

网络流量上传统计计算公式：
irate(node_network_transmit_bytes_total{device!~'tap.*|veth.*|br.*|docker.*|virbr*|lo*'}[30m])*8


1.2 pod监控


1、POD内存使用率

container_memory_rss ： 是Pod实际使用内存数

container_spec_memory_limit_bytes： 是分配给Pod的内存配额

sum(container_memory_rss{container!="POD",container!="alermanager",image!="",pod!=""})by(pod) / sum(container_spec



2、POD的CPU使用率

        container_cpu_usage_seconds_total 是容器累计使用的CPU时间，用它除以CPU总时间，就可以得到容器的cpu使用率,首先计算容器的CPU占用时间，由于节点上的cpu有多个，所以需要将容器在每个CPU上占用的时间累加起来。pod在3m 内累积使用的CPU时间为(根据pod和namespace 进行分组查）:

(sum(rate(container_cpu_usage_seconds_total{namespace="default",pod!=""}[3m]))by(pod))

        然后计算CPU的总时间，这里的CPU数量是容器分配到的CPU数量，container_spec_cpu_quota 这个指标就是容器的cpu配额。它的值是容器指定的 cpu核数100000 ，所以pod在1s内cpu总时间为: Pod 的 CPU 核数1s。

(sum(container_spec_cpu_quota{namespace="default",pod!=""})by(pod)/100000

        container_spec_cpu_quota是容器的CPU配额。所以只有配置了resource.cpu.limits CPU 的pod 才有该指标。将上面 这两个语句的结果 相除。就得到了容器的CPU利用率：

container_cpu_usage_seconds_total：container累计使用的CPU时间，除以CPU的总时间，就得到了容器的CPU使用率

container_spec_cpu_quota：container的配额，为容器指定的CPU个数*100000

sum(rate(container_cpu_usage_seconds_total{image!="",container!="POD",container!=""}[1m])) by (pod,namespace) / (sum(container_spec_cpu_quota{image!="",container!="POD",container!=""}/100000) by (pod,namespace)) * 100



3、POD的文件系统使用量
 

sum(container_fs_usage_bytes{image!="",container!="POD",container!=""}) by(pod, namespace) / 1024 / 1024 / 1024

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：/a/761999.html

如若内容造成侵权/违法违规/事实不符，请联系我们进行投诉反馈qq邮箱809451989@qq.com，一经查实，立即删除！

相关文章

C++视觉开发 三.缺陷检测

C++视觉开发 三.缺陷检测

一.距离变换 1.概念和功能 距离变换是一种图像处理技术，用于计算图像中每个像素到最近的零像素（背景像素）的距离。它常用于图像分割、形态学操作和形状分析等领域。它计算图像中每个像素到最近的零像素（背景像素）的距…
阅读更多...
制造型企业生产管理的技巧，你都用过哪些？

制造型企业生产管理的技巧，你都用过哪些？

作为管理者，一谈到生产管理，你可能会想到很多生产过程中的问题：订单准交率不高、计划达成率不高、生产效率低、再制品太多、生产周期长等等一系列问题；如果你不仅仅是一名管理者，你还是一名企业主，你甚至经…
阅读更多...
安装Rabbitmq遇到的坑

安装Rabbitmq遇到的坑

！！！一定要对号版本号 不同的虚拟机unbontu、cetenos和不同的erlang和不同的rabbitmq之间要对应下载对应版本 下面给出我的版本centos7erlangrabbitmq 分割线 安装好后，如果在虚拟机的服务器上可以打开，在本地浏览器…
阅读更多...
UI（四）布局

UI（四）布局

文章目录 10、Navigator——路由器组件11、Pannel——可滑动面板12、Refresh——刷新组件13、RelativeContainer——相对布局组件14、Scroll——可滚动容器15、SideBarContainer——侧边栏容器16、Stack——堆叠容器17、Swiper——滑动块视图容器18、Tabs和TabContent——页签和…
阅读更多...
Nginx-2

Nginx-2

一、高级配置 1.1网页状态页 基于nginx 模块 ngx_http_stub_status_module 实现，在编译安装nginx的时候需要添加编译参数 --with-http_stub_status_module，否则配置完成之后监测会是提示语法错误注意: 状态页显示的是整个服务器的状态,而非虚拟主机的状…
阅读更多...
【SQL】已解决：SQL错误（208）：对象名‘STRING_SPLIT‘无效

【SQL】已解决：SQL错误（208）：对象名‘STRING_SPLIT‘无效

文章目录 一、分析问题背景二、可能出错的原因三、错误代码示例四、正确代码示例五、注意事项 已解决：SQL错误（208）：对象名‘STRING_SPLIT‘无效 在使用SQL Server进行数据库操作时，遇到错误（208&#xff…
阅读更多...
反向沙箱技术：安全隔离上网

反向沙箱技术：安全隔离上网

在信息化建设不断深化的今天，业务系统的安全性和稳定性成为各公司和相关部门关注的焦点。面对日益复杂的网络威胁，传统的安全防护手段已难以满足需求。深信达反向沙箱技术，以其独特的设计和强大的功能，成为保障政务系统信息安全的…
阅读更多...
SpringBoot项目中获取IP地址

SpringBoot项目中获取IP地址

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录 前言 OkHttp 是一个由 Square 开发的高效、现代的 HTTP 客户端库，用于 Android 和 Java 应用程序。它支持 HTTP/2 和 SPDY 等现代网络协议，…
阅读更多...
详解COB显示屏的技术特点

详解COB显示屏的技术特点

COB（Chip on Board）显示屏作为一种采用倒装COB封装技术的LED显示屏，在显示效果以及使用稳定性跟防护性方面，拥有更大优势，今天跟随COB显示屏厂家中品瑞科技一起来看看，COB显示屏的技术特点： 1、…
阅读更多...
【前端vue3】TypeScrip-类型推论和类型别名

【前端vue3】TypeScrip-类型推论和类型别名

类型推论 TypeScript里，在有些没有明确指出类型的地方，类型推论会帮助提供类型。 例如： 变量xiaoc被推断类型为string 如重新给xiaoc赋值数字会报错 let xiaoc "xiaoc"xiaoc 1111111111111如没有给变量指定类型和赋值&#xf…
阅读更多...
tcpdump命令详解及使用实例

tcpdump命令详解及使用实例

1、抓所有网卡数据包，保存到指定路径 tcpdump -i any -w /oemdata/123.pcap&一、tcpdump简介 tcpdump可以将网络中传送的数据包完全截获下来提供分析。它支持针对网络层、协议、主机、网络或端口的过滤，并提供and、or、not等逻辑语句来去掉无用的信…
阅读更多...
内网服务器时间校正

内网服务器时间校正

新购买的云服务器发现内网机器和可以访问外网的机器时间慢了三分钟，导致有些访问会报错，那么我们配置一下ntp校正一下时间。外网配置起来比较简单，直接下载ntp执行校正命令即可。 比当前时间慢了三分钟 注意当前服务器是可以访问外网的机器这…
阅读更多...
道可云AI智能体平台全新升级，加快培育发展新质生产力

道可云AI智能体平台全新升级，加快培育发展新质生产力

数字化时代浪潮下，以人工智能为代表的新一代信息技术正在加速推动社会变革，给各行各业带来巨大发展机遇。在AI技术的加持下，“人工智能”成为时代发展趋势，也是加快培育和发展新质生产力的新动能。 为培育数字经济发展新动能&…
阅读更多...
自定义vue3 hooks

自定义vue3 hooks

文章目录 hooks目录结构demo hooks 当页面内有很多的功能，js代码太多，不好维护，可以每个功能都有写一个js或者ts，这样的话，代码易读，并且容易维护，组合式setup写法与此结合👍&#…
阅读更多...
Java基础(判断和循环)

Java基础(判断和循环)

一、流程控制语句-顺序结构 顺序结构语句是Java程序默认的执行流程，按照代码的先后顺序，从上到下依次执行。 二、流程控制语句-分支结构（分支结构包括if、switch) if语句：在程序中用来进行判断 1、If语句的第一种格式&#xf…
阅读更多...
HTTP请求响应/与HTTPS区别

HTTP请求响应/与HTTPS区别

HTTP（Hypertext Transfer Protocol）和HTTPS（Hypertext Transfer Protocol Secure）是用于在计算机网络上传输信息的两种协议。 HTTP（Hypertext Transfer Protocol）: HTTP 是一种用于传输超文本的应用层协议…
阅读更多...
谈谈创意设计中的AI、AGI、AIGC

谈谈创意设计中的AI、AGI、AIGC

在当今的数字化时代，创意设计领域正经历着前所未有的变革。随着人工智能（AI）、通用人工智能（AGI）以及人工智能生成内容（AIGC）的迅猛发展，设计师们的工作方式和创作手段都发生了深刻的…
阅读更多...
网络基础-RIP协议

网络基础-RIP协议

RIP（Routing Information Protocol）是一个基于距离矢量的动态路由协议，常用于小型到中型网络。RIP是较早的路由协议之一，具有简单易用的特点。以下是关于RIP协议的详细介绍： RIP的主要特点 ①使用跳数（ho…
阅读更多...
Flutter循序渐进==＞数据结构（列表、映射和集合）和错误处理

Flutter循序渐进==＞数据结构（列表、映射和集合）和错误处理

导言 填鸭似的教育确实不行，我高中时学过集合，不知道有什么用，毫无兴趣，等到我学了一门编程语言后，才发现集合真的很有用；可以去重，可以看你有我没有的，可以看我有你没有的&#xf…
阅读更多...
SAP 替代关系完全替代简介

SAP 替代关系完全替代简介

最近用户在对长周期物料进行备料的时候又提出替代料的问题，主料库存不足的时候需要考虑替代料的在途库存，经常会忘了SAP标准的替代料逻辑，这次一次性把这个逻辑写清楚。 关于替代料的逻辑在前面的博文中测试多个替代料的使用场景 1、后继物料 2、组合替代 本文主要测试一下…
阅读更多...
最新文章

Copyright @ 2022~2023