Kubernetes 深掘り– category –
本線の第6段階の続き。マニフェストの各項目を、1つずつ壊して確かめる。
-
Kubernetes 深掘り
自前運用かマネージドか — 放っておくと1年で止まる
14本かけてクラスタを動かしてきた。では、これを自分で運用するのか。自前運用で発生する仕事を6つ数え、それぞれ「やらないとどうなるか」を書きます。山場は2つ。etcd のスナップショットを実際に取って中身を確認し、復元手順を(危険性を明示したうえで)読みます。もう1つは kubeadm upgrade plan を打って、アップグレードで何が起きるかを見るだけ。そのうえでマネージドが肩代わりするもの・しないものを表にし、費用の3項目を整理し、1本目で決めた「要らない条件」を回収して、Cloud Run・ECS・VPS+Compose・PaaS と並べます。最後にこのサイトとしての結論を出します。 -
Kubernetes 深掘り
RBACとPodのセキュリティ — 全員がcluster-adminだった
練習用のクラスタを、私は全員(といっても自分1人ですが)cluster-admin で使っていました。何を打っても通るので、権限があるのかどうかすら分かりません。この回では、まず kubectl auth can-i --list と kubectl auth whoami で「いまの自分に何ができるか」を出し、ServiceAccount と Role / RoleBinding / ClusterRole / ClusterRoleBinding の関係を図と表で整理します。次に読み取り専用の ServiceAccount を自分で作り、その権限で Pod を作ろうとして拒否されるところまで確かめます。後半は Pod 側で、root で動いていることを確認してから securityContext で落とし、動かなくなったものを直します。Pod Security Admission と NetworkPolicy も1つずつ作って、違反する Pod が本当に弾かれるか、通信が本当に止まるかを目で見ます。名前はすべてダミーです。 -
Kubernetes 深掘り
requestsとlimits — Pendingのまま動かない
Pod が Pending のまま動かない。あるいは動いたのに勝手に落ちて OOMKilled と書いてある。この2つはまったく別の症状に見えて、どちらも requests と limits の話でした。requests は置き場所を決めるための申告でスケジューラが見るもの、limits は実際の上限で kubelet と cgroups が見るもの。役割が違います。わざと大きすぎる requests で Pending を出し、describe node で Allocatable を読み、limits.memory を絞って終了コード137で殺されるところ、limits.cpu を絞って殺されずに遅くなるところまで自分で起こします。QoS の3クラスと LimitRange・ResourceQuota、そして「最初は limits を付けない」という選択肢まで。 -
Kubernetes 深掘り
無停止アップデートとProbe — 更新中に502が出る
「Kubernetes なら無停止で入れ替わる」は自動ではなかった。curl を0.2秒ごとに叩き続けながら更新して、実際にエラーが出るのを見る。原因を3つに分け、readinessProbe で消す。livenessProbe を間違えて再起動を繰り返す状態もわざと作る。maxSurge と maxUnavailable を 0 と 1 で切り替えて置き換わり方を観察し、preStop と終了猶予で接続を切らずに終わる型を作る。最後に Service のラベルだけで Blue/Green とカナリアを実現し、切り戻しの速さ・資源・複雑さで比べる。 -
Kubernetes 深掘り
Podのスケジューリング — 全部同じノードに載った
3台のクラスタなのに、Deployment のレプリカ3つが全部 w1 に載っていました。スケジューラは「置くとき」にしか働かず、あとから均してくれないためです。まずスケジューラが絞り込みと点数付けの2段階で決めていることを表で整理し、置き場所を指定する4つの方法(nodeName・nodeSelector・nodeAffinity の required と preferred)を実際に試して kubectl get pod -o wide で配置を確認します。続いて Pod 同士の関係で決める podAntiAffinity と podAffinity、その要である topologyKey の意味を押さえ、台数が足りないときに required が Pending を生むところをわざと起こします。さらに taint と toleration をノード側から掛け、NoSchedule / PreferNoSchedule / NoExecute の違いを、動いている Pod が追い出されるところまで実演します。topologySpreadConstraints の maxSkew、PriorityClass によるプリエンプション、資源不足で起きるエビクションまで見たうえで、最後に「基本は何も指定しない」を含む使い分けの判断表と、付けた taint とラベルを必ず外す後片づけまでやります。
12