自前運用かマネージドか — 放っておくと1年で止まる

※本記事はアフィリエイト広告(PR)を含みます。

マネージドにしても、運用の仕事は全部は消えません。自前運用と比べて、何が残るのかを整理します。

前回: Kubernetesの監視と調べ方 — logsが空なのに落ちている

これは深掘りです。本線の順路ではありません。 本線の Kubernetesは「状態を宣言する」 — minikube入門 と 1台落としてもPodは移る — kubeadmで組む3台クラスタ を読んで、クラスタを組んでアプリを載せられるようになった人が、「で、これを自分で面倒みるのか?」で止まったときに読む記事です。飛ばしても本線は進みます。

この記事のコマンドは、断りがない限りすべて Ubuntu Server(VM)の中で打ちます。 Windows の PowerShell ではありません。 プロンプトが ユーザー名@ホスト名:~$ の形になっていれば、Linux の中にいます。 前提: 本線の kubeadmで組む3台クラスタ を組んであり、kubectl get nodes が Ready を返すこと。 kubeadm で組んだクラスタが無い場合(minikube や kind しか無い場合)は、この記事の山場①と②は読むだけになります。 それでも構いません。手順の意味は読めば分かるように書きました。 この記事には「打つと壊れるコマンド」が出てきます。 該当箇所には必ず警告を付けました。警告のあるブロックは、練習用クラスタ以外では絶対に打たないでください。


対象レベル: 中級〜上級 / 区分: 発展

目次

14本かけて動かしてきた。では、これを自分で運用するのか

この深掘りシリーズで、Pod を作り、Deployment で台数を保ち、Service で名前を付け、Ingress で外から入れ、ConfigMap と Secret で設定を分け、PVC でデータを残し、StatefulSet でデータベースを載せ、壊れたときの調べ方まで見てきました。

動くようになりました。 ここまでは、間違いなく前に進んでいます。

ただし、ここまでの14本には、1つも出てこなかった話があります。

「作った翌日から、誰がこれを面倒みるのか」

Kubernetes は、作った瞬間がいちばん健康です。 そこから先は、放っておくと必ず劣化します。 しかも劣化の仕方が意地悪で、動いているうちは何も言いません。

いちばん分かりやすいのが証明書です。 kubeadm で組んだクラスタの証明書は、既定で1年で切れます。 切れた瞬間、kubectl get nodes すら通らなくなります。アプリは動いているのに、操作できないクラスタができあがります。

「1年後の自分は、それを覚えているか?」——ここが、この記事の出発点です。

この記事は、判断のための記事です。 新しい機能は1つも覚えません。かわりに、自前で運用したときに発生する仕事を、具体的に数えて、金額と時間の話まで持っていきます。 そのうえで、そもそも Kubernetes を使わないという選択まで戻ります。

この記事でわかること

  • 自前運用の仕事は6つあること。アップグレード・証明書・etcd・ノード・付属コンポーネント・セキュリティ修正で、どれも「やらないと、ある日いきなり止まる」タイプであること
  • kubeadm の証明書は既定で1年であること。切れてもアプリは動き続けるが、操作が一切できなくなること
  • etcd が壊れると、クラスタの全設定が消えること。Pod もノードも入れ直せば戻るが、etcd の中身だけは戻らないこと
  • Kubernetes のバージョンは1つ飛ばしで上げられないこと。1.31 から 1.33 へは直接行けず、必ず 1.32 を経由すること
  • マネージドは「運用しなくてよくなる」サービスではないこと。消えるのは制御面だけで、ノード・アプリ・コストは自分の担当のままであること
  • 1本目で決めた「要らない条件」に当てはまるなら、いまでも要らないこと。14本読んだことは、要らないと判断できるようになったという成果であること

この記事でやること

  1. 自前運用で発生する仕事を6つ列挙し、それぞれ「やらないとどうなるか」を書き出す
  2. kubeadm certs check-expiration で、自分のクラスタの証明書があと何日か見る
  3. 山場①: etcdctl snapshot save で etcd のバックアップを1回取り、snapshot status で中身を確認する(復元手順は読むだけでも可)
  4. 山場②: kubeadm upgrade plan を打って、アップグレードで何が起きるかを見るだけ見る
  5. マネージド・他の選択肢・費用を並べて、自分の場合の答えを決める
  6. 練習用クラスタを完全に片づける

先に知る言葉

この記事で初めて出てくる言葉を、ここで1〜2行ずつ説明します。 詳しくは 用語集 にもまとめています。

言葉意味
コントロールプレーン(制御面)クラスタを動かしている側の部品一式。API Server・etcd・Scheduler・Controller Manager。アプリが載る場所ではない
etcdクラスタの全設定を保存しているデータベース。 kubectl apply した内容は、最終的にここに入る。ここが唯一の「資産」
スナップショットある瞬間の etcd の中身を、1つのファイルに書き出したもの。 バックアップのこと
etcdctl / etcdutletcd を操作するコマンド。etcdctl は動いている etcd に喋りかける、etcdutl はファイルだけを扱う、という分担
マイナーバージョン1.31.4 の真ん中の 31 のこと。Kubernetes はこれが年に3回上がる
バージョンスキュー部品同士のバージョン差をどこまで許すかの決まり。Kubernetes はこれを公式に定めている
CNIPod にIPを配り、Pod 同士を繋ぐ部品。 本線の3台クラスタで入れたもの(Calico や Flannel)がこれ
CSIPod にストレージを繋ぐ部品。 PVC が実際にディスクを掴むときに動く
Ingress ControllerIngress のルールを実際に処理する本体。 ルールを書いても、これが居ないと何も起きない
マネージド Kubernetesコントロールプレーンをクラウド事業者が持ってくれる形。 EKS / GKE / AKS など
静的Pod(static Pod)kubelet が、ファイルを見て直接起動する Pod。 kubeadm では制御面の部品がこの形で動いている

自前で運用すると、何が仕事になるか

「運用が大変」と言われても、大変さの中身が分からないと判断できません。 数えます。6つです。

そして重要なのは、「頻度」より「やらないとどうなるか」のほうです。そこを1つずつ書きます。

① Kubernetes 本体のアップグレード(年3回のマイナー版)

項目中身
頻度年におよそ3回。 マイナーバージョンが上がる
サポート期間1つのマイナー版がサポートされるのは、およそ1年間
やらないとどうなるかサポートが切れると、脆弱性が見つかっても修正版が出なくなる。 さらに、放置期間が長いほど「1つ飛ばしができない」制約が効いて、追いつくのに何回もアップグレードを重ねることになる

「動いているから触らない」がいちばん高くつくのが、ここです。 2年放置すると、追いつくために6回アップグレードすることになります。 1回ずつ、順番に。

② 証明書の更新(1年)

項目中身
頻度kubeadm の既定で1年。 ただしアップグレードすると自動で更新されるので、①をやっていれば自然と満たされる
やらないとどうなるかある日いきなり kubectl が一切通らなくなる。 Unable to connect to the server: x509: certificate has expired or is not yet valid が出る。アプリの Pod は動き続けるので、外から見ると「正常」に見えるのが最悪の点

これは、この記事でいちばん最初に確認してほしいものです。 打ちます。

bash
$ sudo kubeadm certs check-expiration
CERTIFICATE                EXPIRES                  RESIDUAL TIME   EXTERNALLY MANAGED
admin.conf                 Sep 20, 2027 04:11 UTC   364d            no
apiserver                  Sep 20, 2027 04:11 UTC   364d            no
apiserver-etcd-client      Sep 20, 2027 04:11 UTC   364d            no
apiserver-kubelet-client   Sep 20, 2027 04:11 UTC   364d            no
controller-manager.conf    Sep 20, 2027 04:11 UTC   364d            no
etcd-healthcheck-client    Sep 20, 2027 04:11 UTC   364d            no
etcd-peer                  Sep 20, 2027 04:11 UTC   364d            no
etcd-server                Sep 20, 2027 04:11 UTC   364d            no
scheduler.conf             Sep 20, 2027 04:11 UTC   364d            no

CERTIFICATE AUTHORITY   EXPIRES                  RESIDUAL TIME   EXTERNALLY MANAGED
ca                      Sep 18, 2035 04:11 UTC   9y              no
etcd-ca                 Sep 18, 2035 04:11 UTC   9y              no

見るのは RESIDUAL TIME(残り時間)の列です。

見えたもの意味
上の表が 364dクラスタを組んだ翌日ということ。 ここから1年のカウントダウンが始まっている
下の表(CA)が 9y認証局のほうは10年。 こちらは当分切れない

つまり、組んだ日から1年後の同じ日に、何もしなければ止まります。

手で更新するなら、これ1本です。

bash
$ sudo kubeadm certs renew all

renew all を打ったあと、制御面の部品を再起動しないと新しい証明書が読み込まれません。 静的Podを作り直す必要があります。手順は公式の「証明書管理」に書かれています(参考リンク)。 練習用クラスタで試す分には安全ですが、いま切れていないなら打つ必要はありません。

[スクリーンショット: 01_証明書の残り日数.png] sudo kubeadm certs check-expiration を実行して、RESIDUAL TIME の列が見えている画面を撮ってください。

③ etcd のバックアップと復元

項目中身
頻度理想は毎日自動。 学習用なら「大きく変える前に手で1回」でも意味がある
やらないとどうなるかetcd が壊れた瞬間、クラスタの全設定が消える。 Deployment も Service も ConfigMap も Secret も PVC の紐付けも、全部。ノードは生きているのに、何も載っていない状態から作り直しになる

ここが山場①です。 すぐあとでやります。

④ ノードの追加と削除

項目中身
頻度不定期。 増やすとき、壊れたとき、OSを入れ替えるとき
やらないとどうなるか壊れたノードを「削除」せずに放置すると、Kubernetes はそこに Pod を置こうとし続ける。 NotReady のノードが残ったまま、Pod が Pending で止まるという形で出てくる

手順そのものは短いです。 消す前に、中身を退避(drain)してから消すという順番だけが決まっています。

bash
$ kubectl get nodes
$ kubectl drain <ノード名> --ignore-daemonsets --delete-emptydir-data
$ kubectl delete node <ノード名>

drain は、そのノードの Pod を全部よそへ追い出すコマンドです。 練習用クラスタ以外で打たないでください。 --ignore-daemonsets が要る理由は、各ノードに1つずつ常駐する種類の Pod(CNI など)は追い出せないからです。これを付けないとエラーで止まります。 戻すときは kubectl uncordon <ノード名> です。drain はノードに「もう置くな」の印を付けるので、それを外します。

⑤ CNI・CSI・Ingress Controller の更新

項目中身
頻度Kubernetes 本体を上げるたびに、対応バージョンの確認が要る
やらないとどうなるか本体だけ上げて、CNI が新しい本体に対応していないと、Pod にIPが配られなくなる。 症状は「新しい Pod が ContainerCreating から進まない」。本体のアップグレード直後に起きるので、原因に気づきにくい

ここが、自前運用でいちばん見落とされる仕事です。 Kubernetes 本体のリリースノートには、CNI の対応表は載っていません。 CNI 側のドキュメントを、自分で見に行く必要があります。 「本体を上げる」は、実際には「本体と、自分で入れた部品全部を、整合させて上げる」という仕事です。

自分が何を入れたのか、数えられるようにしておきます。

bash
$ kubectl get pods -A -o wide
NAMESPACE       NAME                              READY   STATUS    RESTARTS   AGE   NODE
ingress-nginx   ingress-nginx-controller-7d9c...  1/1     Running   0          3d    node1
kube-system     calico-node-4xz9t                 1/1     Running   0          5d    node1
kube-system     calico-node-9k2mf                 1/1     Running   0          5d    node2
kube-system     coredns-5d78c9869d-h8lqz          1/1     Running   0          5d    node1
kube-system     etcd-cp1                          1/1     Running   0          5d    cp1
kube-system     kube-apiserver-cp1                1/1     Running   0          5d    cp1
kube-system     kube-controller-manager-cp1       1/1     Running   0          5d    cp1
kube-system     kube-proxy-2tvq7                  1/1     Running   0          5d    node1
kube-system     kube-scheduler-cp1                1/1     Running   0          5d    cp1

この一覧のうち、kube-apiserver kube-controller-manager kube-scheduler etcd kube-proxy coredns は kubeadm が入れたものです。それ以外——上の例なら calico-node と ingress-nginx-controller——は、自分で入れたものです。

自分で入れたものは、自分で上げます。 マネージドに移っても、この行は消えません。

⑥ セキュリティ修正の追随

項目中身
頻度不定期。 重大なものは年に数回
やらないとどうなるか公開されている脆弱性が、そのまま残る。 Kubernetes に限らず、土台の Ubuntu、コンテナランタイム、自分のアプリのベースイメージまで全部が対象

Kubernetes の修正は、パッチバージョン(1.31.4 の末尾)で出ます。 追いかける場所は、公式のリリース情報です(参考リンク)。

6つを、1枚に並べる

#仕事頻度やらないと
①本体のアップグレード年3回サポート切れ。放置するほど追いつくのが大変になる
②証明書の更新年1回(①で自動更新される)kubectl が全部通らなくなる。アプリは動いたまま
③etcd のバックアップ毎日が理想壊れたら全設定が消える。戻せない
④ノードの追加・削除不定期NotReady を放置すると Pod が Pending で止まる
⑤CNI・CSI・Ingress Controller①のたびPod にIPが配られない/PVC が掴めない/外から入れない
⑥セキュリティ修正不定期脆弱性が残る

6つのうち、①②③⑤の4つは「気づけない」種類の仕事です。 誰も催促してくれません。 監視も出しません。カレンダーに書いておく以外に方法がありません。

これが「Kubernetes の運用が重い」の正体です。 難しいのではなく、忘れると壊れることが6つある、というだけです。


etcd のバックアップと復元を1回やる

6つのうち、③だけは「1回やっておくかどうか」で結果が大きく変わります。 ここでやります。

この節は kubeadm で組んだクラスタが前提です。 minikube / kind の場合は読むだけにしてください。 構成が違うため、同じコマンドが通りません。

なぜ etcd だけが特別なのか

1本目の 1台で足りるなら入れない で、部品を6つ並べました。 そこで書いたことを、もう一度出します。

部品壊れたら
API Server / Scheduler / Controller Manager / kubelet / kube-proxy入れ直せば復活する。 中身を持っていないから
etcd入れ直しても、中身は戻らない。 ここだけが資産

kubectl apply -f app.yaml を50回打ってきたなら、その50回分の結果が入っているのが etcd です。

「YAML が Git にあるから大丈夫」は、半分だけ正しいです。 自分が書いた YAML は Git から戻せます。 戻せないのは、機械が書いたほう——つまり status 側と、自動で振られた識別子、Secret のうち手で入れていないもの、PVC と実ディスクの紐付けです。 「YAML を全部 apply し直せば元通り」になるかどうかは、自分の運用次第です。だからスナップショットのほうが確実です。

まず etcdctl を入れる

etcd 本体は Pod として動いていますが、操作コマンドは別に入れます。

bash
$ sudo apt update
$ sudo apt install -y etcd-client

入ったか確かめます。

bash
$ etcdctl version
etcdctl version: 3.5.15
API version: 3.5

バージョンの数字は違って構いません。 API version: 3.5 以上であれば、この記事の手順が通ります。 etcdctl: command not found が出る場合は、ディストリビューションによってパッケージ名が違います。apt search etcd で探してください。

証明書を指定してスナップショットを取る

ここが kubeadm 特有の、いちばん引っかかるところです。

etcd は、誰にでも中身を見せません。 証明書を提示した相手にしか答えません。kubeadm はその証明書を /etc/kubernetes/pki/etcd/ に置いています。

まず、そこに何があるか見ます。

bash
$ sudo ls -l /etc/kubernetes/pki/etcd/
total 32
-rw-r--r-- 1 root root 1086 Sep 20 04:11 ca.crt
-rw------- 1 root root 1679 Sep 20 04:11 ca.key
-rw-r--r-- 1 root root 1159 Sep 20 04:11 healthcheck-client.crt
-rw------- 1 root root 1679 Sep 20 04:11 healthcheck-client.key
-rw-r--r-- 1 root root 1208 Sep 20 04:11 peer.crt
-rw------- 1 root root 1679 Sep 20 04:11 peer.key
-rw-r--r-- 1 root root 1208 Sep 20 04:11 server.crt
-rw------- 1 root root 1679 Sep 20 04:11 server.key

使うのは3つです。

ファイル役割
ca.crt「この etcd は本物か」を確かめるための認証局の証明書
server.crtこちらが名乗るための証明書
server.keyその鍵

sudo が要る理由は、.key が rw-------(所有者しか読めない)で、所有者が root だからです。 Permission denied の正体 で見た 600 が、そのまま効いています。

取ります。

bash
$ sudo ETCDCTL_API=3 etcdctl \
    --endpoints=https://127.0.0.1:2379 \
    --cacert=/etc/kubernetes/pki/etcd/ca.crt \
    --cert=/etc/kubernetes/pki/etcd/server.crt \
    --key=/etc/kubernetes/pki/etcd/server.key \
    snapshot save /root/etcd-snapshot.db
{"level":"info","ts":"2026-09-26T05:02:11.331Z","caller":"snapshot/v3_snapshot.go:65","msg":"created temporary db file","path":"/root/etcd-snapshot.db.part"}
{"level":"info","ts":"2026-09-26T05:02:11.418Z","caller":"snapshot/v3_snapshot.go:73","msg":"fetching snapshot","endpoint":"https://127.0.0.1:2379"}
{"level":"info","ts":"2026-09-26T05:02:11.702Z","caller":"snapshot/v3_snapshot.go:88","msg":"fetched snapshot","endpoint":"https://127.0.0.1:2379","size":"6.7 MB","took":"370.5ms"}
Snapshot saved at /root/etcd-snapshot.db

最後の行に Snapshot saved at が出れば成功です。

引数を1つずつ読みます。

引数意味
ETCDCTL_API=3etcd の API を第3世代で喋るという指定。環境変数なので、コマンドの前に置く
--endpoints=https://127.0.0.1:2379同じマシンの中の etcd に繋ぐ。 2379 が etcd の待ち受けポート
--cacert / --cert / --keyさっきの3ファイル
snapshot save <出力先>保存先のファイル名

保存先を ~/etcd-snapshot.db にしないでください。 sudo を付けているので、~ はroot のホームを指します。自分のホームに置いたつもりが /root/ に出来ます。 混乱を避けるため、この記事では最初から /root/ と明示して書きました。

中身を確認する

取れたファイルが本当に中身を持っているかを見ます。 ここを飛ばすと、「0バイトのファイルをバックアップだと思っていた」が起きます。

bash
$ sudo ls -lh /root/etcd-snapshot.db
-rw------- 1 root root 6.4M Sep 26 05:02 /root/etcd-snapshot.db

サイズが数MB以上あれば、まず中身は入っています。 さらに中を読みます。

bash
$ sudo etcdutl --write-out=table snapshot status /root/etcd-snapshot.db
+----------+----------+------------+------------+
|   HASH   | REVISION | TOTAL KEYS | TOTAL SIZE |
+----------+----------+------------+------------+
| 8f2c1a94 |    31427 |       1183 |     6.4 MB |
+----------+----------+------------+------------+

TOTAL KEYS の 1183 が、いま Kubernetes が覚えているものの数です。Pod も Service も ConfigMap も、ここに1件ずつ入っています。

列意味
HASH中身の指紋。 復元したときに一致するかを見るためのもの
REVISIONetcd が何回書き換えられたかの通し番号
TOTAL KEYSここが 0 なら、そのバックアップは無意味です
TOTAL SIZEファイルの中身のサイズ

etcdutl ではなく etcdctl snapshot status でも同じ表が出ます。 ただし新しい版では非推奨の警告が出ます。 理由は分担が変わったからです。 動いている etcd に喋りかけるのが etcdctl、ファイルだけを扱うのが etcdutl。 snapshot status はファイルを見るだけなので etcdutl 側へ移りました。 etcdutl: command not found が出る場合は、etcd-client パッケージが古い版です。そのときは sudo ETCDCTL_API=3 etcdctl --write-out=table snapshot status /root/etcd-snapshot.db を使ってください。 警告が出ても、表は出ます。

[スクリーンショット: 02_snapshot_status.png] snapshot status の表が出て、TOTAL KEYS に数字が入っている画面を撮ってください。

復元は「クラスタを止めてから」

ここからは、実行は任意です。 手順の意味を読むだけでも、この節の目的は果たせます。

警告:以下の手順は、いま動いているクラスタの中身をスナップショット時点に巻き戻します。 スナップショットを取ったあとに作ったものは、全部消えます。 練習用クラスタ以外では、絶対に打たないでください。 VMware を使っているなら、先に VM のスナップショットを取っておくと、まるごと戻せます。

復元がなぜ危険かというと、「動いている etcd に上書きする」ことができないからです。

etcd は、動いている間ずっと中身を書き換えています。 そこへ外から別の中身を流し込むと、書きかけと書き戻しが混ざります。 だから、先に止める必要があります。

順番は5段階です。

1. 制御面を止める

kubeadm では、制御面の部品は「静的Pod」として動いています。 これは /etc/kubernetes/manifests/ にファイルがあると kubelet が勝手に起動する、という仕組みです。

つまり、ファイルをどかせば止まります。

bash
$ sudo mkdir -p /root/manifests-backup
$ sudo mv /etc/kubernetes/manifests/kube-apiserver.yaml /root/manifests-backup/
$ sudo mv /etc/kubernetes/manifests/etcd.yaml /root/manifests-backup/

止まったか確かめます。

bash
$ sudo crictl ps | grep -E "etcd|apiserver"

何も出なければ止まっています。 数十秒かかることがあります。

ここで kubectl はもう通りません。 API Server を止めたので当然です。これで正常です。 crictl が無い場合は、sudo systemctl status kubelet と sudo ls /var/lib/etcd で代用してください。

2. いまのデータを退避する

消さずに、名前を変えて残します。 失敗したときに戻すためです。

bash
$ sudo mv /var/lib/etcd /var/lib/etcd-old

3. スナップショットから復元する

bash
$ sudo etcdutl snapshot restore /root/etcd-snapshot.db --data-dir /var/lib/etcd
2026-09-26T05:20:41Z	info	snapshot/v3_snapshot.go:260	restoring snapshot	{"path": "/root/etcd-snapshot.db", "wal-dir": "/var/lib/etcd/member/wal", "data-dir": "/var/lib/etcd"}
2026-09-26T05:20:41Z	info	membership/store.go:141	Trimming membership information from the backend...
2026-09-26T05:20:41Z	info	snapshot/v3_snapshot.go:287	restored snapshot	{"path": "/root/etcd-snapshot.db", "data-dir": "/var/lib/etcd"}

--data-dir に指定した場所が「既にある」と、restore は失敗します。 だから2番で名前を変えました。 etcdutl が無い版では sudo ETCDCTL_API=3 etcdctl snapshot restore ... です。

4. 制御面を戻す

bash
$ sudo mv /root/manifests-backup/etcd.yaml /etc/kubernetes/manifests/
$ sudo mv /root/manifests-backup/kube-apiserver.yaml /etc/kubernetes/manifests/

kubelet が勝手に拾って起動します。 待ちます。

5. 戻ったか確かめる

bash
$ kubectl get nodes
$ kubectl get pods -A

kubectl が通り、スナップショットを取った時点の内容が見えていれば成功です。

制御面が複数台ある構成では、この手順は「全台を止めてから」になります。 1台だけ巻き戻すと、残りの台と食い違って、もっとひどいことになります。 この記事の3台構成(制御面1台+ワーカー2台)は、制御面が1台なので上の手順で足ります。

うまくいかなかったときの戻し方

3番以降で失敗したら、退避したものに戻します。

bash
$ sudo mv /etc/kubernetes/manifests/kube-apiserver.yaml /root/manifests-backup/
$ sudo mv /etc/kubernetes/manifests/etcd.yaml /root/manifests-backup/
$ sudo rm -rf /var/lib/etcd
$ sudo mv /var/lib/etcd-old /var/lib/etcd
$ sudo mv /root/manifests-backup/etcd.yaml /etc/kubernetes/manifests/
$ sudo mv /root/manifests-backup/kube-apiserver.yaml /etc/kubernetes/manifests/

sudo rm -rf を打つ手順があるので、パスを1文字ずつ確認してください。 rmで消したものは戻らない の話が、いちばん怖い形で出てくるのがここです。

こので分かること

やってみると、体感で分かることが1つあります。

バックアップを取るのは1コマンド。復元は5段階で、途中クラスタが完全に止まる。

つまり「バックアップがある」は「すぐ戻せる」を意味しません。 戻すには、止められる時間が要ります。

そして、この非対称さこそが、マネージドを検討する最大の理由です。


アップグレードで何が起きるかを、先に読む

山場②は、実行しません。 kubeadm upgrade plan は、何をするか教えてくれるだけのコマンドです。

plan は安全です。読むだけです。 危ないのは kubeadm upgrade apply のほうです。この記事では apply は打ちません。

まず、いまの版を数字で押さえる

bash
$ kubectl version
$ kubeadm version
$ kubelet --version
Client Version: v1.31.1
Kustomize Version: v5.4.2
Server Version: v1.31.1
kubeadm version: &version.Info{Major:"1", Minor:"31", GitVersion:"v1.31.1"}
Kubernetes v1.31.1

ここで、3つの数字が別々に出てくることに注目してください。

名前何のバージョンか
Client Versionkubectl のバージョン。 手元の道具
Server VersionAPI Server のバージョン。 クラスタ本体
kubeadm version組み立て道具のバージョン
kubelet各ノードで動く常駐部分のバージョン

これが「別々に上げる」という話の正体です。 あとで戻ってきます。

plan を打つ

bash
$ sudo kubeadm upgrade plan
[upgrade] Fetching available versions to upgrade to
[upgrade/versions] Cluster version: 1.31.1
[upgrade/versions] kubeadm version: v1.31.1
[upgrade/versions] Target version: v1.31.6
[upgrade/versions] Latest version in the v1.32 series: v1.32.2

Components that must be upgraded manually after you have upgraded the control plane with 'kubeadm upgrade apply':
COMPONENT   NODE    CURRENT   TARGET
kubelet     cp1     v1.31.1   v1.31.6
kubelet     node1   v1.31.1   v1.31.6
kubelet     node2   v1.31.1   v1.31.6

Upgrade to the latest version in the v1.31 series:

COMPONENT                 CURRENT   TARGET
kube-apiserver            v1.31.1   v1.31.6
kube-controller-manager   v1.31.1   v1.31.6
kube-scheduler            v1.31.1   v1.31.6
kube-proxy                v1.31.1   v1.31.6
CoreDNS                   v1.11.1   v1.11.3
etcd                      3.5.15-0  3.5.16-0

You can now apply the upgrade by executing the following command:

	kubeadm upgrade apply v1.31.6

ここに、この節で言いたいことが全部書いてあります。 3つ読み取ります。

読み取り① 1つ飛ばしのバージョンアップはできない

Latest version in the v1.32 series: v1.32.2 と出ています。 1.32 があるなら、そこへ行けばいいのでは? と思うところです。

行けます。ただし「その次」には行けません。

いまの版行ける先行けない先
1.31.x1.31 の新しいパッチ / 1.32 の最新1.33 以降

Kubernetes は、マイナーバージョンを1つずつしか上げられません。 1.31 から 1.33 へ行くには、必ず 1.32 を経由します。

これが「放置すると高くつく」の具体的な中身です。 2年放置して 1.31 のまま、最新が 1.37 になっていたら、6回アップグレードすることになります。 しかも1回ごとに、CNI・CSI・Ingress Controller の対応も確認します。

理由も納得できるものです。 Kubernetes は「部品同士のバージョン差をどこまで許すか」を公式に決めています。 その許容差を超える飛び方を、そもそも許可していない、というだけです。

読み取り② kubelet と kubectl は別に上げる

出力の中に、はっきり書かれています。

Components that must be upgraded manually after you have upgraded the control plane

「制御面を上げたあと、手で上げる必要があるもの」です。そこに kubelet が3ノード分並んでいます。

kubeadm upgrade apply は、制御面の部品しか上げません。

何をどうやって上げるか
kube-apiserver / controller-manager / scheduler / etcd / CoreDNSkubeadm upgrade apply が上げる
kubelet各ノードで apt で上げて、systemctl restart kubelet。ノードの数だけ繰り返す
kubectlapt で上げる。これは「自分の手元の道具」なので、クラスタとは独立
kubeadm 自身上げる作業を始める前に、いちばん最初に上げる

順番があります。

  1. kubeadm を上げる(これから使う道具だから、先に新しくする)
  2. sudo kubeadm upgrade plan で確認する
  3. sudo kubeadm upgrade apply <版> で制御面を上げる
  4. 各ノードで drain → kubelet と kubectl を上げる → restart → uncordon

4番を、ノードの数だけ繰り返します。 3台なら3回。10台なら10回。 ここが「台数が増えると運用が線形に重くなる」場所です。

Ubuntu では、これらのパッケージには通常「勝手に上がらない印」が付いています。

bash
$ sudo apt-mark showhold
kubeadm
kubectl
kubelet

hold(保留)されている、という意味です。 apt upgrade をしても、この3つだけは上がりません。

これは親切設計です。 apt upgrade の巻き添えで kubelet が上がると、バージョン差の決まりを踏み越えてクラスタが壊れます。 だから、上げるときは意図的に sudo apt-mark unhold してから上げ、終わったら hold に戻す、という手順になります。 showhold に何も出ない場合は、保留が掛かっていません。apt upgrade で事故る可能性があるので、sudo apt-mark hold kubelet kubeadm kubectl を打っておいてください。 apt updateは更新しない で見た update と upgrade の違いが、ここで効いてきます。

読み取り③ etcd と CoreDNS も一緒に上がる

表の下2行を見てください。

CoreDNS                   v1.11.1   v1.11.3
etcd                      3.5.15-0  3.5.16-0

アップグレードは、Kubernetes 本体だけの話ではありません。 etcd も一緒に上がります。

だから、アップグレードの前に etcd のバックアップを取ります。 山場①と山場②は、独立した話ではありません。 ②をやる前に①をやる、という順番です。

[スクリーンショット: 03_upgrade_plan.png] sudo kubeadm upgrade plan の出力のうち、COMPONENT / CURRENT / TARGET の表が見えている部分を撮ってください。


マネージドが肩代わりするもの / しないもの

ここまでで、自前の仕事が6つあることを見ました。 マネージドに移すと、そのうち何が消えるのかを表にします。

本線の EKSでも消えない仕事がある — 自作クラスタとの違い で、この突き合わせは一度やりました。 ここでは、いま数えた6つの仕事に、そのまま重ねます。

#仕事自前マネージド
①本体のアップグレード全部自分。制御面もノードも制御面は事業者。ノードは自分(ボタンは用意されている)
②証明書の更新自分(1年)事業者。意識しなくてよくなる
③etcd のバックアップ自分。この記事の山場①事業者。etcd の存在自体が見えなくなる
④ノードの追加・削除自分。VM も自分で用意自分。「ノードグループ」の設定として自分がやる
⑤CNI・CSI・Ingress Controller自分CNI と CSI は既定のものが入る。Ingress Controller は自分
⑥セキュリティ修正制御面もノードもアプリも自分制御面は事業者。ノードOSとアプリは自分

消えるのは、はっきり2つです。

②証明書 と ③etcd。 この2つが、マネージドの本体価値です。 どちらも「忘れると全部止まる」タイプの仕事なので、消える価値は、作業時間で測ると小さく、事故率で測ると大きいです。

そして、消えないものを正面から書きます。

消えないものなぜ
ノードの管理アプリが載っているのはノード。 事業者が持つのは制御面だけ。ノードOSの更新も、台数も、サイズも自分
アプリそのものDeployment も Service も Ingress も PVC も、書くのは自分。 この深掘り14本で学んだことは、マネージドでも1つも無駄にならない
コスト止め忘れたら請求が来る。 クラウド料金は止め忘れで膨らむ の話がそのまま効く
壊れたときの調べ方kubectl describe / logs / get events は同じ。 マネージドでも、原因を読むのは自分

「マネージドにすれば運用しなくていい」は、はっきり間違いです。 正しくは「6つのうち2つが消えて、1つが軽くなる」です。残りは自分の仕事のままです。


費用の考え方

先に断ります。この記事に金額は書きません。

理由は3つです。

  1. 料金は変わる。 記事を書いた時点の数字は、読む時点で古い
  2. リージョン(どこの国のデータセンターか)で違う
  3. 単価だけ見ても、請求額は分からない。 実際の請求は「何時間動いたか」「どれだけ通信したか」で決まる

必ず、その事業者の公式の料金ページを、自分で見てください。 リンクは参考リンクに置きました。

かわりに、「何に対してお金がかかるのか」の項目だけを書きます。 これは変わりません。

3つに分かれる

#項目中身自前だと
①制御面の料金クラスタ1つにつき、時間あたりいくら。 アプリを1つも載せていなくても、クラスタが存在する限りかかるかからない(かわりに制御面用のVMの費用と、自分の時間)
②ノードの料金アプリが載るサーバーの料金。 実体は普通の仮想マシン。台数 × サイズ × 時間かかる。 自前でも同じ。VMは要る
③通信料クラウドの外へ出ていくデータ量。 入ってくる分は無料でも、出ていく分は有料というのが一般的かかる。 VPSでも「転送量」として存在する

ここで押さえるべきこと

①の制御面の料金は、クラスタの数だけ増えます。 開発用・検証用・本番用と3つ作れば、制御面の料金も3つ分です。個人の学習では、ここが効いてきます。

②のノード料金は、自前でもマネージドでも、ほぼ同じだけかかります。 「マネージドは高い」と言われるとき、比べているのは①の分です。②は、どちらでも払います。

③の通信料は、いちばん見落とされます。 「動かしていないのに請求が来た」の多くはここか、消し忘れたディスクです。

判断のしかたは1つだけです。

比べるもの比べてはいけないもの
①制御面の月額 vs 自分が6つの仕事に使う時間①の金額だけを見て「高い」と決めること

①の月額が、自分の時給の数時間分で収まるなら、たいていマネージドのほうが安いです。 6つの仕事に月に何時間かかるかを、先に見積もってください。 その数字が無いと、比較になりません。


そもそも Kubernetes を使わない選択

1本目の 1台で足りるなら入れない で、「要らない条件」を4つ決めました。 ここで回収します。

4つの条件を、もう一度当てる

#条件いま、自分はどうか
1サーバーが1台で足りているfree -h と uptime を見る。常時50%を切っているなら、足りている
2落ちても、数分待てる「10分止まったら誰にいくら損害が出るか」を金額で言えるか
3運用しているのが1人自分が寝ている間に誰かが直す約束があるか
4アクセスが安定している1日の最大と最小が10倍以上違うか

14本読んだあとでも、4つ全部に当てはまるなら、答えは1本目と同じです。入れないでください。

そして、これは「14本が無駄だった」という意味ではありません。 1本目の時点では、この4条件は「誰かの言うこと」でした。 14本やったいまは、自分で確かめた結論です。 「要らない」と自分で判断できるようになったこと自体が、この14本の成果です。

使わない場合の選択肢

「Kubernetes を使わない」は「何もしない」ではありません。 置き換え先があります。

選択肢何をしてくれるか何をしてくれないか向く場面
Cloud Run(コンテナを渡すと動かしてくれる形)サーバーの存在自体が見えなくなる。 アクセスが来たときだけ動き、来なければ0台まで落ちる。HTTPS も付いてくる常駐する処理が置きにくい(リクエスト単位で動く前提)。データベースは別に用意する個人開発のWebアプリなら、まずここを検討する。 アクセスが少ない時間帯に費用が発生しない
ECS / Fargate(AWSのコンテナ実行基盤)コンテナを何台動かすかを宣言すると、その通りに保ってくれる。 サーバーを自分で持たない形(Fargate)が選べるKubernetes ではないので、YAML も概念も別物。 学んだことがそのままは効かないすでに AWS の中で組んでいる場合。周辺サービスとの繋ぎが楽
VPS + Docker Composeこの深掘りの1本目でやったこと。 restart: unless-stopped で落ちたら戻る。設定は compose.yaml 1つ複数台にまたがれない。無停止の入れ替えができない。サーバーの管理は全部自分1台で足りるなら、これが最短。 費用も予測しやすい
PaaS(コードを push すると動く形)Dockerfile すら要らないことがある。 push すればビルドされて公開されるできることが決まっている。 枠から外れると、急に何もできなくなるとにかく最初に世に出したいとき。あとで移せる

表の中でいちばん強調したいのは、「VPS + Compose」の行です。 この深掘りの1本目で、Compose に4つの困りごとをぶつけました。 そのうち①「プロセスが死ぬ」は Compose 自身が解けました。 1台で足りるなら、残り3つ(ホストごと落ちる・置き場所・無停止入れ替え)は、そもそも起きません。 つまり「1台で足りる」人にとって、Compose に穴は無い、というのが結論です。

Kubernetes を選ばなかった場合でも、Docker の知識はそのまま効きます。 コンテナは軽い仮想マシンではない — Dockerの導入 と Composeなら1コマンド — 複数コンテナをまとめる が土台です。

そして「Kubernetes は重すぎた」という判断そのものについては、本線に別の記事があります。 Kubernetesは重すぎた — Swarmという選択肢


「サーバーが1台で足りている」なら、その1台をシンVPSのようなVPSにして、Docker Composeとrestartポリシーで動かし続ける構成が、運用の仕事を減らしやすい形です。2026年11月時点の公式表示では大容量メモリプランの2GB(2コア・50GB)が1ヶ月契約で月1,040円、36ヶ月契約で月950円(税込)で、無料のお試し期間はなく最低利用期間は3ヶ月です。

判断のフローチャート

上から順に読んで、当てはまったところで止まってください。

  • サーバーは1台で足りているか?
  • はい → Kubernetes は使わない。 VPS + Docker Compose か、Cloud Run。 ここで終わり
  • いいえ → 次へ
  • 「止められない時間帯」があるか?(10分止まったときの損害を、金額で言えるか)
  • 言えない → まだ使わない。 1台+外部の死活監視で十分。ここで終わり
  • 言える → 次へ
  • コンテナを動かす以上のことが必要か?(複数のサービスを繋ぐ・宣言で管理する・自動で台数を増減する)
  • いいえ → Cloud Run か ECS / Fargate。 Kubernetes を持ち出さなくても足りる
  • はい → 次へ
  • 運用する人は何人か?
  • 1人 → マネージド一択。 自前の6つの仕事を1人で背負うと、①②③⑤を必ず忘れる
  • 2人以上 → 次へ
  • 「自分で運用したい理由」があるか?(法律・社内規則でクラウドに置けない、学習が目的、など)
  • 学習が目的 → 自前(kubeadm)が最良。 この深掘り14本でやったこと
  • 法律・規則の制約 → 自前。 ただし6つの仕事を、担当者と手順書として先に決める
  • 特に無い → マネージド。 「自分でできるから」は、運用し続ける理由にはならない

このフローチャートで、いちばん多くの人が止まるのは最初の1つ目です。 それでいいです。 1台で足りている人が大半だからです。


このサイトの結論

このサイトとしての答えを、3行で書きます。

場面答え理由
学習が目的なら自前(kubeadm)が最良マネージドだと、制御面が見えない。 etcd も証明書も Scheduler も、隠されているものは学べない。 この14本は、隠されていないから書けた
本当に運用するならマネージド6つの仕事のうち、②証明書と③etcd という「忘れると全部止まる2つ」が消える。 個人や少人数で、この2つを1年間忘れないのは無理
個人のサービスならそもそも要らない1本目の4条件に当てはまる。 VPS + Compose か Cloud Run で足りる。そして、それを自分で判断できるようになった

この3つは矛盾していません。 「学ぶために自前で組み、運用はマネージドに任せ、自分のサービスには入れない」——これが同時に成立します。

むしろ、この3つを言い分けられることが、この14本のいちばんの成果だと考えています。


手元のVMでメモリが足りず、kubeadmの3台を外に置くなら、複数台をローカル接続で組めるVPSにコントロールプレーンとワーカーを分けて載せる方法もあります。クラウド VPS byGMOは全プランに月間稼働率99.99%のSLAが付き、2026年11月時点の公式表示では4GB(仮想4コア・200GB)が12ヶ月契約で月2,618円(税込)で、これにサーチャージ費が毎月加わって合計月3,927円になります。15日間の無料お試しは初めての申し込みで1GB/2GB/4GBプランのみ、最終日の2営業日前までに解約しないと自動で本契約になります。

14本で、何ができるようになったか

振り返ります。 記事の名前ではなく、「できるようになったこと」で並べます。

#できるようになったこと
1Kubernetes を入れない判断ができる。 Compose で何が解けて何が解けないかを、実際に困って確かめた → 1台で足りるなら入れない
2Pod が「消えたら戻らない」単位だと分かる。 コンテナと Pod の違いを説明できる → 消したPodは戻ってこない
3Deployment で台数を保ち、消しても戻ってくる理由が説明できる → 消したPodが戻ってくる
4Pod のIPが変わっても届く理由が分かる。 Service とラベルの対応を追える → PodのIPは翌日には変わる
5外から入れる。 NodePort・LoadBalancer・Ingress を使い分けられる → EXTERNAL-IPがpendingのまま
6設定と秘密情報を分けられる。 そして Secret が暗号化ではないことを知っている → Secretは暗号化ではない
7データを残せる。 PV と PVC の関係を説明できる → Podを作り直すとデータが消える
8データベースを載せたときに何が変わるか分かる。 StatefulSet と headless Service → DBを3つに増やしたら壊れた
9Pod がどれだけ資源を使うかを宣言できる。 足りないと殺されることも知っている
10どのノードに置くかを、意図して決められる
11無停止で入れ替えられる。 そして、壊れたときに戻せる
12負荷に応じて台数を自動で増減できる
13誰が何をできるかを制限できる。 最初から全権を配らない
14壊れたときに、どこを見るか順番で言える。 これがいちばん実用的
15そして今回——自前で運用する仕事を6つ数え、etcd を戻し、アップグレードの制約を知り、「使わない」まで含めて選べる

1番と15番が、同じことを言っています。 「入れない判断ができる」で始まり、「使わないまで含めて選べる」で終わりました。 間の13本は、その判断に中身を持たせるための時間でした。


つまずいたところ

~/etcd-snapshot.db に取ったつもりが、見つからなかった

sudo etcdctl ... snapshot save ~/etcd-snapshot.db と打って、Snapshot saved at が出ました。 ところが ls ~ に何も無い。

原因は sudo です。 ~ は「いま実行しているユーザーのホーム」を指します。 sudo を付けたので root として動き、/root/etcd-snapshot.db に出来ていました。

bash
$ sudo ls -lh /root/

ここにありました。 だからこの記事では、最初から /root/ と書いています。

「ファイルが無い」と思ったら、まず sudo を疑ってください。 sudo を付けたコマンドの ~ は、自分のホームではありません。

Error: context deadline exceeded で snapshot が取れなかった

証明書は正しく指定したのに、これが出ました。

原因は --endpoints の書き間違いでした。 http:// と書いていました。etcd は https:// でしか受け付けません。

書いたもの結果
--endpoints=http://127.0.0.1:2379タイムアウトする。「証明書が違う」とは言ってくれない
--endpoints=https://127.0.0.1:2379通る

暗号化された通信に平文で話しかけると、相手は黙ります。 「エラーが出ない」ではなく「返事が来ない」になるので、タイムアウトの形で出ます。 context deadline exceeded を見たら、まず https かどうかを見てください。

etcdctl snapshot status に「deprecated」と出て、間違えたと思った

表は正しく出たのに、警告が出るので失敗したと思いました。

失敗ではありません。 「このコマンドは etcdutl へ移りました」という案内です。

コマンド役割
etcdctl動いている etcd に喋りかける
etcdutlファイルだけを扱う。 etcd が動いていなくても使える

snapshot status はファイルを読むだけなので、etcdutl 側が正しい、という整理です。

kubeadm upgrade plan を「上げるコマンド」だと思って、打つのをためらった

名前に upgrade が入っているので、打つと上がると思っていました。

plan は読むだけです。 apply を打つまで何も変わりません。

コマンド何が起きるか
kubeadm upgrade plan何も変わらない。 何ができるかを表示するだけ
kubeadm upgrade apply <版>実際に上げる。ここが本番

迷ったら --help を打ってください。 sudo kubeadm upgrade plan --help に「Check which versions are available to upgrade to」と書いてあります。「Check」なので、読むだけです。

「マネージドにすればノードも見なくていい」と思っていた

制御面が消えるので、全部消えると思っていました。

消えるのは制御面だけです。 ノードは、事業者のコンソールから作れるようになるだけで、「何台・どのサイズ・OSはいつ更新するか」は自分が決めます。

上の表の④と⑥に、⚠️ 自分 と書いたのはこの理由です。

復元手順を、いきなり本番と同じ気持ちで打ちかけた

練習用クラスタなので大丈夫だと思って、/var/lib/etcd を rm -rf しかけました。

止めて、先に VM のスナップショットを取りました。 結果、2回失敗して2回戻せました。

「戻せる状態を作ってから壊す」は、障害対応は切り分けの順番がすべて でやったことと同じです。 VMware を使っている強みは、まさにここです。OSごと戻せます。

証明書の残りが 364d なのを見て、まだ先だと思った

1年あるので、忘れて構わないと思いました。

そこが罠です。 「1年後に思い出す」は成立しません。

やったのは1つだけです。

カレンダーに「Kubernetes 証明書更新」を、期限の1か月前に登録しました。

技術的な対策ではありません。 でも、これが6つの仕事の中でいちばん効きます。 そして、この一手間が要らなくなるのがマネージドです。 つまり 「カレンダーに登録する」という行為そのものが、マネージドを選ぶ理由の実物です。


後片づけ

シリーズ最終回なので、練習用クラスタを完全に消す手順まで書きます。

消すかどうかは自由です。 残しておけば、あとで思い出すときに使えます。 ただし、VMを起動したままにするとメモリを食い続けます。 使わないなら、少なくとも VM は停止しておいてください。

段階1: この記事で作ったものだけ消す(いちばん軽い)

スナップショットのファイルを消します。

bash
$ sudo rm -f /root/etcd-snapshot.db
$ sudo ls -l /root/

復元を試した場合は、退避したものが残っています。

bash
$ sudo ls -d /var/lib/etcd-old
$ sudo rm -rf /var/lib/etcd-old

/var/lib/etcd-old を消すのは、いまのクラスタが正常に動いていることを確かめてからにしてください。 kubectl get nodes が Ready を返すこと。

段階2: アプリだけ消して、クラスタは残す

14本で作ったものを消します。

bash
$ kubectl get all --all-namespaces

練習で使った名前空間ごと消すのがいちばん確実です。 名前空間は回ごとに違う(svclab など)ので、上の一覧で確かめて消します。

bash
$ kubectl delete namespace <練習で作った名前空間>

default 名前空間は消せません。 消そうとしないでください。 名前空間を分けずに default に作った場合は、kubectl delete deployment,service,ingress,configmap,pvc --all で個別に消します。

PVC を消したら、実際のディスクも消えたか確認します。

bash
$ kubectl get pv
No resources found

kubectl get pv に何か残っている場合、ディスクを掴んだままです。 クラウドを使っているなら、課金が続きます。 消してください。

段階3: クラスタを完全に消す

ここからは戻せません。

各ノードで、順番に打ちます。ワーカーが先です。

bash
$ sudo kubeadm reset -f
[reset] Reading configuration from the cluster...
[preflight] Running pre-flight checks
[reset] Deleted contents of the etcd data directory: /var/lib/etcd
[reset] Stopping the kubelet service
[reset] Unmounting mounted directories in "/var/lib/kubelet"
[reset] Deleting contents of directories: [/etc/kubernetes/manifests /var/lib/kubelet /etc/kubernetes/pki]

The reset process does not clean CNI configuration. To do so, you must remove /etc/cni/net.d

出力の最後に書いてあるとおり、残るものがあります。 消します。

bash
$ sudo rm -rf /etc/cni/net.d
$ sudo rm -rf $HOME/.kube
$ sudo iptables -F
$ sudo iptables -t nat -F

iptables -F は、そのマシンのファイアウォールの規則を全部消します。 練習用VM以外で打たないでください。 ufwで開けたのに繋がらない で見たとおり、ここは触ると通信が変わります。 kubeadm が iptables に大量の規則を入れているので、reset だけでは残ります。 それを掃除しています。

パッケージも消すなら、こうです。

bash
$ sudo apt-mark unhold kubeadm kubectl kubelet
$ sudo apt purge -y kubeadm kubectl kubelet etcd-client
$ sudo apt autoremove -y

unhold を先にやらないと、purge が拒否されます。 保留が掛かっているためです。

段階4(推奨): VM のスナップショットに戻す

実は、段階3を手で打つより、これが確実です。

VMware Workstation の場合、Kubernetes を入れる前のスナップショットがあるなら、そこへ戻すだけです。

  1. VM を停止する(VMの中で sudo poweroff)
  2. ホストの VMware Workstation で、対象のVMを選ぶ
  3. [VM]→[スナップショット]→[スナップショットマネージャー] を開く
  4. Kubernetes を入れる前のスナップショットを選んで[移動]

「移動」すると、それ以降の変更は全部消えます。 残しておきたいファイルがあれば、先に取り出してください。 scp でホストへ持ってくるか、Git に上げておくのが確実です。

方法良いところ注意
kubeadm reset で消すVMは残る。 別のことにすぐ使える消し残しが出る。 iptables・CNI設定・イメージ
スナップショットに戻す完全に元通り。 消し残しがゼロスナップショットを取っていないと使えない。それ以降の作業も消える

[スクリーンショット: 04_スナップショットマネージャー.png] VMware Workstation のスナップショットマネージャーで、Kubernetes を入れる前のスナップショットが選ばれている画面を撮ってください。

「スナップショットを取っていなかった」という場合は、いまから取る習慣にしてください。 大きいものを入れる前に1回。これだけで、この記事の後片づけは1分で終わります。


まとめ

  • 14本かけて動かしてきた。この記事は、その先の「誰が面倒みるのか」を決める回
  • 自前運用の仕事は6つ。 本体のアップグレード / 証明書 / etcd / ノードの増減 / CNI・CSI・Ingress Controller / セキュリティ修正
  • 6つのうち①②③⑤は「気づけない」種類。 誰も催促しない。カレンダーに書く以外に方法がない
  • kubeadm の証明書は既定で1年。 切れると kubectl が全部通らなくなるが、アプリは動き続けるので外からは正常に見える
  • 確認は sudo kubeadm certs check-expiration。 見るのは RESIDUAL TIME の列
  • etcd だけが資産。 他の部品は入れ直せば戻るが、etcd の中身は戻らない
  • バックアップは1コマンド。 ただし kubeadm では証明書3つ(ca.crt / server.crt / server.key)の指定が要る
  • 取ったら必ず snapshot status で TOTAL KEYS を見る。 0 なら、そのバックアップは無意味
  • 復元は5段階で、途中クラスタが完全に止まる。 制御面のマニフェストをどかす → 現データを退避 → restore → 戻す → 確認
  • 「バックアップがある」は「すぐ戻せる」ではない。 戻すには、止められる時間が要る
  • kubeadm upgrade plan は読むだけ。 実際に上げるのは apply のほう
  • マイナーバージョンは1つ飛ばしにできない。 1.31 から 1.33 へは、必ず 1.32 を経由する。放置するほど回数が増える
  • kubeadm upgrade apply は制御面しか上げない。 kubelet は各ノードで、kubectl は手元で、別に上げる
  • apt-mark hold が掛かっているのは親切設計。 apt upgrade の巻き添えで kubelet が上がると壊れる
  • アップグレードでは etcd と CoreDNS も一緒に上がる。 だから②の前に①(バックアップ)をやる
  • マネージドで消えるのは、②証明書 と ③etcd の2つだけ。 作業時間で測ると小さく、事故率で測ると大きい
  • ノードの管理・アプリ・コスト・壊れたときの調べ方は、マネージドでも自分の担当のまま
  • 費用は3つに分かれる。 制御面の料金 / ノードの料金 / 通信料。 金額は必ず公式の料金ページを自分で見る
  • 制御面の料金はクラスタの数だけ増える。 ノード料金は自前でもマネージドでもほぼ同じだけかかる
  • 比べるのは「①制御面の月額」と「6つの仕事に自分が使う時間」。 金額だけ見て高いと決めない
  • 1本目の4条件(1台で足りる / 数分待てる / 運用が1人 / 負荷が安定)に全部当てはまるなら、いまでも要らない
  • 使わない場合の選択肢は4つ。 Cloud Run / ECS・Fargate / VPS + Compose / PaaS。1台で足りるなら Compose に穴は無い
  • このサイトの結論は3行。 学習には自前が最良(隠されていないから学べる)/運用するならマネージド/個人のサービスならそもそも要らない
  • 「入れない判断ができる」で始まり、「使わないまで含めて選べる」で終わった。 間の13本は、その判断に中身を持たせるためのもの
  • 後片づけは4段階。 手で消すなら kubeadm reset + CNI設定と iptables の掃除。VMのスナップショットに戻すほうが確実

【深掘り】Kubernetes シリーズは、ここまでです。 全15本で、Pod から始めて、運用と「そもそも使うかどうか」まで来ました。このシリーズが目指したのは、Kubernetes を使えるようにすることではなく、使うかどうかを自分で決められるようにすることでした。最終回で「個人のサービスならそもそも要らない」と書いたのは、逃げではありません。要らないと判断できるのは、何が要るのかを知っている人だけだからです。動かせるようになったうえで選ばない——これが、このシリーズのゴールでした。ここから先は、本線に戻ってください。 この14本は脇道でしたが、戻ったときに見えるものは、来る前とは違っているはずです。

参考リンク


この段階の確認

【深掘り】Kubernetes は、ここで終わりです。 次に進む前に、答えを見ずに試してください。

読み終えた直後は、たいてい「分かった気」になっています。 手が動くかどうかは別です。

説明できますか

  1. 消したPodが戻ってくるのと戻ってこないのは、何が違うのか
  2. Secret は暗号化ではない。 では何なのか
  3. EXTERNAL-IP が pending のままになるのはなぜか

手が動きますか

  • requests と limits を設定し、Pending の原因を自分で読む
  • 無停止でアップデートし、更新中に502が出ないことを確かめる
  • RBACを設定し、全員が cluster-admin でない状態を作る

1つでも詰まったら、飛ばした回があります。 そこへ戻ってください。戻るのは後退ではありません。 戻り先の目安: Podの回 / Deploymentの回 / ConfigMapとSecretの回 / Probeの回

全部答えられたなら、次の段階へ進んでください。


次に読む

この記事は 【深掘り】Kubernetes の 15 / 15 本目です。

記事
← 前の記事Kubernetesの監視と調べ方 — logsが空なのに落ちている
→ 次の記事設計の進め方と容量見積もり — 図ではなく数から始める

上から順に読めば積み上がるように並べています。 飛ばしても構いませんが、詰まったら前の回に戻ってください。

全体の順路は はじめに にあります。

roadmap.sh のどこをやっているか

DevOps›Kubernetes — Operations
  • 自前運用で発生する仕事 / etcd のバックアップ
  • マネージドとの分担・使わない選択

この記事は、上の項目を実際に手を動かして確かめる回です。

よかったらシェアしてね!
  • URLをコピーしました!
  • URLをコピーしました!

コメント

コメントする

目次