[Prometheus/Kiali] Setting Prometheus or Kiali for multi-cluster Istio mode.

Hello sau rất nhiều bài note của mình về istio. Mình nghĩ là chúng ta đã đầy đủ n

ăng lực để quản trị hệ thông istio rùi ý.
Chúng ta tìm hiểu về việc các đặt các công củ để monitor hệ thống istio và đặc biệt là hệ thống multi-cluster của istio.

Istio đã cung cấp sẵn các manifest về kiali, prometheus, grafana, jaeger ở link sau:
https://github.com/istio/istio/tree/master/samples/addons

Install the addons of istio on each cluster.

Mình tham khảo link sau: Observability Best Practices và mình chọn mô hình Federation using workload-level aggregated metrics

Đầu tiền anh em cài bộ addons trên từng cluster nhé.

Contents

1) Prometheus

Giờ trên cluster1 (primary) mình có 1 prometheus-primary với link sau: http://prometheus-istio.nimtechnology.com/
Còn trên cluster2 (remote) mình có một con prometheus-remote là: http://192.168.101.51:32166/ mình lười nên mình nodeport cho lẹ

Bạn sẽ hiểu đơn giản là con prometheus-primary sẽ đọc dữ liệu của prometheus-remote thông qua path “/federate”

nếu bạn có nhiều Prometheus collector thì sẽ con master sẽ sử dụng rất nhiều RAM

Bạn sẽ cần thêm vào configmap của prometheus-primary như sau:

    scrape_configs:
    # remote cluster
    - job_name: 'federate-istio-remote'
      scrape_interval: 15s

      honor_labels: true
      metrics_path: '/federate'

      params:
        'match[]':
          - '{job="pilot"}'
          - '{job="envoy-stats"}'
          - '{__name__=~"istio_(.*)"}'
      static_configs:
        - targets:
          #- 'prometheus.{{INGRESS_DOMAIN}}'
          - '192.168.101.51:32166'
          labels:
            cluster: 'cluster2'