Category: Log, Monitor & Tracing

[Elastic] Install Elasticsearch through package manager.

January 14, 2022October 6, 2023 nim No Comments

Mình cái trên ubuntu 20.04https://www.elastic.co/guide/en/elasticsearch/reference/current/deb.html 1) Install Elasticsearch 2) Recheck 2.1) Checking port opened thấy port 9200 lên là ok 2.2) check status Kiểm tra sem cài đã ngon nghẻ chưa? Những điểm cần lưu ý: status:– green: là ok– yellow là warning– red là Not OK -> elastic của bạn died rồi. number_of_nodes: trong…

ELK, Log, Monitor & Tracing

[VictoriaMetrics/Grafana/Prometheus/Kiali] VictoriaMetrics is a fast, cost-effective and scalable time series database

December 21, 2021December 26, 2021 nim 2 Comments

1) Introduction VictoriaMetrics is a fast, cost-effective and scalable time series database. It can be used as a long-term remote storage for Prometheus. It is recommended using single-node version instead of cluster version for ingestion rates lower than a million of data points per second. Mình sẽ hợp với VictoriaMetrics với mô hình mutil Prometheus hoặc…

Grafana, Isito-EnvoyFilter, Prometheus, VictoriaMetrics

[Prometheus] Relabelling – Custom “name” to your mind

December 15, 2021 nim No Comments

Case chúng ta là ntn. Tôi nhận metrics từ 1 Recording Rules và source_labels:[__name__] như ảnh. Tôi muốn chuyển nó từ federate:istio_request_duration_milliseconds_bucket:rate1mthành như sau: istio_request_duration_milliseconds_bucket Câu hỏi làm sao bạn để ý dòng regex: ‘federate:(.*):rate1m’ trong đoạn code bên dưới. Nếu bạn ko metric_relabel_configs thì bạn phải query như sau:federate:istio_request_duration_milliseconds_bucket:rate1m

Prometheus, Uncategorized

[Prometheus/Istio] Research about Recording Rules in Prometheus and reduce metrics of istio cluster.

December 15, 2021December 24, 2021 nim No Comments

Note lần này sẽ giúp chúng ta tìm hiểu về:– Recording Rules trong prometheus.– Giảm metrics của istio. Từ đó giảm ram của prometheus. Liệu việc giảm ram của prometheus bằng các giảm metrics thì có thực sự hiệu quả? https://karlstoney.com/2020/02/25/federated-prometheus-to-reduce-metric-cardinality/ Giờ chúng ta sẽ đi tìm hiều Recording Rules trong 1 ví dụ thực…

Isito-EnvoyFilter, Prometheus

[Loadtest/vegeta] Why did I choose Vegeta to load test? I like it

November 26, 2021November 26, 2021 nim No Comments

https://github.com/tsenart/vegeta/releases Chúng ta thực hiện “attack” (a.k.a load test) httpbin servers với 5 requests trên second trong vòng 5 seconds Nói thêm 1 chút về grafana https://geshan.com.np/blog/2020/09/vegeta-load-testing-primer-with-examples/

Coding, Grafana

[Grafana/Prometheus] Grafana Chars display “NA” value

November 11, 2021November 11, 2021 nim No Comments

1) Problem Vẫn là một ngày đẹp trời.Bạn cần vào các chart Granfana để monitor hệ thống có ngon lành hay ko?Bạn chợt nhận ra 1 điều Prometheus vấn chạy ngon lạnh, không lỗi gì. Vậy thử sem chart đó đang query cái j. Mình tiến hành kiểm tra config map của Prometheus. 2)Resovle problem…

Grafana

[Grafana/Prometheus] Design chart for bucket metrics to Grafana

November 8, 2021November 11, 2021 nim No Comments

Một ngày dẹp trời thì bạn được sếp quang cho 1 metrics và kêu vẽ chart trên grafana.OK => pilot_xds_push_time_bucketbạn để ý là nó có đuôi là bucket và data của metric có trường le. 1) research Histogram: Thực chất là một biểu đồ tích lũy, Histogram tạo bộ đếm cho số lượng sự kiện, bộ…

Grafana, Prometheus

[Prometheus] Prometheus to use monitoring k8s

November 7, 2021March 30, 2023 nim No Comments

Bạn có thể tham khảo helm chart sau:https://prometheus-community.github.io/helm-charts Phần dưới này đã bị outdate get password admin grafana: Nếu bạn đã cài được prometheus thì việc tiếp theo là config như thế nào để monitor được application.Minh đang có 1 workload là spin-clouddriver bằng 1 số câu lệnh hal config … thì mình đã enable…

Prometheus

[Prometheus] TIP – Custom Prometheus

October 26, 2021October 26, 2021 nim No Comments

how long prometheus save data? https://stackoverflow.com/questions/59298811/increasing-prometheus-storage-retention Theo như sách báo nói thì promethues sẽ lưu mặc định là 15 ngày storage.tsdb.retention.time=15d prometheus install theo kiểu package thì tìm trong prometheus trong k8s thì bạn tự mò thử text trên nhé

Log, Monitor & Tracing, Prometheus

[Grafana] Design chart Gause Bar – Grafana with Metrics Sum

October 25, 2021October 26, 2021 nim No Comments

1) Case Study Mục đích mình có 1 metrics sum độ thị trên grafana nó sẽ tăng dần theo thời gian.Mình vẽ 1 chart trên grafana và show ra được trong 1h hay 2h thì metríc đã tăng bao nhiêu giá trị 2) Learning – Query PromQL 2.1) increase( []) https://prometheus.io/docs/prometheus/latest/querying/functions/#increase increase(v range-vector) calculates the increase…

Grafana, Log, Monitor & Tracing