Prometheus によるモニタリングの使用

W&B Server で Prometheus を使用します。Prometheus のインストールは kubernetes ClusterIP サービス として公開されます。

Prometheus モニタリングは セルフマネージドインスタンス でのみ利用可能です。

Prometheus の メトリクス エンドポイント (/metrics) に アクセス するには、以下の手順に従ってください。

1. Kubernetes CLI ツールキットである kubectl を使用して クラスター に接続します。詳細については、Kubernetes の Accessing Clusters ドキュメントを参照してください。

2. 以下の コマンド で クラスター の内部 アドレス を確認します。

   kubectl describe svc prometheus
   

3. kubectl exec を使用して、Kubernetes クラスター 内で実行されているコンテナ内でシェルセッションを開始します。<internal address>/metrics のエンドポイントを叩きます。

   以下の コマンド をコピーして ターミナル で実行し、<internal address> を実際の内部 アドレス に置き換えてください。

   kubectl exec <internal address>/metrics
   

ネットワーク内のあらゆるリソースに アクセス するためだけに exec できるテスト用 Pod が起動します。

kubectl run -it testpod --image=alpine bin/ash --restart=Never --rm

そこから、ネットワーク内部への アクセス を維持するか、Kubernetes nodeport サービス を使用して自身で公開するかを選択できます。