Loki– tag –
-
Kubernetes 深掘り
Kubernetesの監視と調べ方 — logsが空なのに落ちている
Pod が動かないので kubectl logs を打ったのに、何も出ませんでした。原因はアプリではなく、そもそも「まだ起動していない」ことでした。この記事では、Pending / ImagePullBackOff / CrashLoopBackOff / Running なのに繋がらない / Running なのに遅い の5つの症状から「最初に打つコマンド」を決める表を作り、events・logs の各オプション・exec・debug・port-forward・status.conditions・describe node を実際に全部打ちます。そのうえで Helm で監視を1つだけ入れ、Grafana で最初に見るべき画面(ノードの資源と Pod の再起動回数)を決め、Kubernetes 固有の指標とアラートの設計、k9s などの道具まで進みます。 -
DevOps
ログが3箇所に散っている — Lokiで1画面にする
障害のたびに journalctl と nginx のログと docker logs を行き来していた話。前回わざと先送りにしたログ集約を、Loki と Promtail で回収します。なぜ Elasticsearch ではなく Loki なのか、ラベルで絞るとはどういうことか、そして秘密情報をログに出すと保存先が新しい漏洩経路になる話つき。保持期間の設定を忘れるとディスクが減り続けます。
1