VictoriaMetrics+Prometheusで構築する複数Kubernetesの監視基盤

CyberAgentではプライベートクラウド上で Kubernetes as a Service を提供しており、多数のクラスタが稼働しています。
クラスタ運用者として複数のクラスタ郡を監視するためには、Prometheus とそのバックエンドストレージである VictoriaMetrics を利用した横断の監視基盤が効果的です。
本セッションではこれらを用いた際に長期間のログを保証する工夫や、正しく Kubernetes 自体を監視するための方法、Ingress などの LB の監視、アラートの項目などクラスタの運用に必要なことについて紹介します。