Category: Prometheus

Hiện tại mình gặp 1 tình huống: Mặc dù deploymnet đó mình đã tắt rồi nhưng chart vẫn hiện thị kết quả. Vậy tại sao chart kia vẫn hiển thị số? và theo 1 kết luận thì chart đang lấy latest value and not according to follow the time range. Mình chợt nghĩ ra sử…

Read More “[Prometheus – Grafana – Monitoring] Look into rate and irate, min, max, average and latest over a specific time.” »

Bạn sẽ tạo visualization: CHọn table Chúng ta có 4 metrics sau: Bạn cần điền thêm metrics và chọn Format: Table, Type: Instantvà add các metrics khác tương tự, Bạn chuyển qua tab Transform. Chúng ta cần combine metrics lại như sau:Metrics 1: thì lấy label node, self1, value will be Value #AMetrics 2: thì…

Read More “[Grafana] Draw table visualization in Grafana” »

There are a few options to filter or allowlist metrics before they are sent to the remote storage via remote_write in Prometheus: 1. Use metric relabeling You can configure relabelling rules on the remote_write config to filter or transform metrics before they are sent. For example: with metrics: my_metric_http{status_code=200, cluster=nim] 100my_metric_http{status_code=500, cluster=nim] 100k8s_metric_memory{container=web, cluster=nim] 100…

Read More “[Prometheus] filter or allowlist metrics before sending to the remote storage via remote_write in Prometheus” »

Look into the situation Đầu tiên chúng ta có 2 metric labels như sau: Metrics and Labels: Look into kube_pod_container_info metrics. With kube_pod_container_info Look into windows_container_cpu_usage_seconds_kernelmode windows_container_cpu_usage_seconds_kernelmode thì có container_id, nhưng lại không có namespace, pod, container==> Bằng mắt: thì chúng ta không thể nào nhận biết được CPU usage này của container nào. Từ…

Read More “How to join labels of 2 different metrics on PromQL” »

Hôm nay thì mình muốn monitor usage của pv https://github.com/antonputra/tutorials/tree/main/lessons/134 What is the kubelet Yes, I know about the kubelet in Kubernetes (k8s). The kubelet is the primary “node agent” that runs on each node in a Kubernetes cluster. It can register the node with the apiserver using one of several methods: the hostname, a…

Read More “[Kubernetes] Monitor Persistent Volume usage in Kubernetes using Prometheus” »

1) the preparing before install Prometheus Operator Đầu tiên thì bạn cần cài đặt trước các CustomResourceDefinition REPO URL: https://prometheus-community.github.io/helm-chartsCHART: prometheus-operator-crds:2.0.0 We need to press the sync button I am sure that you also have a problem with prometheuses.monitoring.coreos.comThis message: “CustomResourceDefinition.apiextensions.k8s.io “prometheuses.monitoring.coreos.com” is invalid: metadata.annotations: Too long: must have at most 262144 bytes“ Don’t be…

Read More “[Promethues] Install Prometheus Operator on Kubernetes.” »

Hiện tại thì mỉnh sử dụng windows-exporter để monitor windows k8s.https://github.com/prometheus-community/windows_exporter Để integrate với windows_exporter thì bạn nên cài trước prometheus_operator. Mình đang test trên eks 1.24 1) Install the component of windows exporter. https://github.com/prometheus-community/windows_exporter/blob/master/kubernetes/windows-exporter-daemonset.yaml Lúc này thì trên prometheus-operator đang nhận được metrics của windows-exporter. https://grafana.com/grafana/dashboards/17264-windows-exporter-for-prometheus-dashboard-en-v20221026/ Hiện tại mình chỉ thấy là nó monitor…

Read More “[windows-exporter] Monitor the windows Kubernetes.” »