Kubernetes– tag –
-
Kubernetes 深掘り
HPAでオートスケール — TARGETSがunknownのまま
HorizontalPodAutoscaler を作ったのに TARGETS が のまま動かない。原因は2つあり、どちらも「測る人がいない」に行き着く。metrics-server を入れて kubectl top を出せるようにし、resources.requests を外して をわざと再現し、使い捨て Pod から wget を回して Pod が増えるのを目で見る。増えるのは速く減るのは遅い理由、望むレプリカ数の計算式、メモリで測ると減らなくなる話、VPA と Cluster Autoscaler が何をするか、そしてオートスケールが効かない場面までを実際に動かして確かめる。 -
Kubernetes 深掘り
Kubernetesの監視と調べ方 — logsが空なのに落ちている
Pod が動かないので kubectl logs を打ったのに、何も出ませんでした。原因はアプリではなく、そもそも「まだ起動していない」ことでした。この記事では、Pending / ImagePullBackOff / CrashLoopBackOff / Running なのに繋がらない / Running なのに遅い の5つの症状から「最初に打つコマンド」を決める表を作り、events・logs の各オプション・exec・debug・port-forward・status.conditions・describe node を実際に全部打ちます。そのうえで Helm で監視を1つだけ入れ、Grafana で最初に見るべき画面(ノードの資源と Pod の再起動回数)を決め、Kubernetes 固有の指標とアラートの設計、k9s などの道具まで進みます。 -
Kubernetes 深掘り
自前運用かマネージドか — 放っておくと1年で止まる
14本かけてクラスタを動かしてきた。では、これを自分で運用するのか。自前運用で発生する仕事を6つ数え、それぞれ「やらないとどうなるか」を書きます。山場は2つ。etcd のスナップショットを実際に取って中身を確認し、復元手順を(危険性を明示したうえで)読みます。もう1つは kubeadm upgrade plan を打って、アップグレードで何が起きるかを見るだけ。そのうえでマネージドが肩代わりするもの・しないものを表にし、費用の3項目を整理し、1本目で決めた「要らない条件」を回収して、Cloud Run・ECS・VPS+Compose・PaaS と並べます。最後にこのサイトとしての結論を出します。 -
Kubernetes 深掘り
RBACとPodのセキュリティ — 全員がcluster-adminだった
練習用のクラスタを、私は全員(といっても自分1人ですが)cluster-admin で使っていました。何を打っても通るので、権限があるのかどうかすら分かりません。この回では、まず kubectl auth can-i --list と kubectl auth whoami で「いまの自分に何ができるか」を出し、ServiceAccount と Role / RoleBinding / ClusterRole / ClusterRoleBinding の関係を図と表で整理します。次に読み取り専用の ServiceAccount を自分で作り、その権限で Pod を作ろうとして拒否されるところまで確かめます。後半は Pod 側で、root で動いていることを確認してから securityContext で落とし、動かなくなったものを直します。Pod Security Admission と NetworkPolicy も1つずつ作って、違反する Pod が本当に弾かれるか、通信が本当に止まるかを目で見ます。名前はすべてダミーです。 -
Kubernetes 深掘り
requestsとlimits — Pendingのまま動かない
Pod が Pending のまま動かない。あるいは動いたのに勝手に落ちて OOMKilled と書いてある。この2つはまったく別の症状に見えて、どちらも requests と limits の話でした。requests は置き場所を決めるための申告でスケジューラが見るもの、limits は実際の上限で kubelet と cgroups が見るもの。役割が違います。わざと大きすぎる requests で Pending を出し、describe node で Allocatable を読み、limits.memory を絞って終了コード137で殺されるところ、limits.cpu を絞って殺されずに遅くなるところまで自分で起こします。QoS の3クラスと LimitRange・ResourceQuota、そして「最初は limits を付けない」という選択肢まで。 -
Kubernetes 深掘り
無停止アップデートとProbe — 更新中に502が出る
「Kubernetes なら無停止で入れ替わる」は自動ではなかった。curl を0.2秒ごとに叩き続けながら更新して、実際にエラーが出るのを見る。原因を3つに分け、readinessProbe で消す。livenessProbe を間違えて再起動を繰り返す状態もわざと作る。maxSurge と maxUnavailable を 0 と 1 で切り替えて置き換わり方を観察し、preStop と終了猶予で接続を切らずに終わる型を作る。最後に Service のラベルだけで Blue/Green とカナリアを実現し、切り戻しの速さ・資源・複雑さで比べる。 -
Kubernetes 深掘り
Podのスケジューリング — 全部同じノードに載った
3台のクラスタなのに、Deployment のレプリカ3つが全部 w1 に載っていました。スケジューラは「置くとき」にしか働かず、あとから均してくれないためです。まずスケジューラが絞り込みと点数付けの2段階で決めていることを表で整理し、置き場所を指定する4つの方法(nodeName・nodeSelector・nodeAffinity の required と preferred)を実際に試して kubectl get pod -o wide で配置を確認します。続いて Pod 同士の関係で決める podAntiAffinity と podAffinity、その要である topologyKey の意味を押さえ、台数が足りないときに required が Pending を生むところをわざと起こします。さらに taint と toleration をノード側から掛け、NoSchedule / PreferNoSchedule / NoExecute の違いを、動いている Pod が追い出されるところまで実演します。topologySpreadConstraints の maxSkew、PriorityClass によるプリエンプション、資源不足で起きるエビクションまで見たうえで、最後に「基本は何も指定しない」を含む使い分けの判断表と、付けた taint とラベルを必ず外す後片づけまでやります。 -
Kubernetes
Kubernetesは「状態を宣言する」 — minikube入門
docker run は「こう動かせ」という命令、Kubernetes は「この状態であれ」という宣言。違いは、コンテナを手で消したときに分かる。Pod / Service / Deployment を Compose と対応させて理解し、minikube で1台構成を動かすまで。 -
Kubernetes
Helmは結局YAMLを作るだけ — Kubernetesのパッケージ管理
開発用と本番用でレプリカ数とイメージのタグだけ違うのに、マニフェストを丸ごとコピーしていませんか。Helm は「Kubernetes の apt」で、チャートという単位でアプリを配ります。使う側から入り、values.yaml で値だけ差し替え、自分でチャートを作り、helm template で「実際に何が生成されるか」を目で確かめて、upgrade と rollback で戻せることまで。 -
Kubernetes
1台落としてもPodは移る — kubeadmで組む3台クラスタ
minikube は1台なので、落ちたら全部落ちる。VMware でVMを3台(クローン2台)用意し、kubeadm でコントロールプレーン1台+ワーカー2台のクラスタを組む。クローンの machine-id 重複、CNI を入れないと Ready にならない件、ufw が塞ぐポートまで潰したうえで、ワーカーの電源を実際に切って Pod が別ノードに作り直されるところを見ます。