EKSでも消えない仕事がある — 自作クラスタとの違い

マネージドKubernetes。クラウドに収まるサーバーと、手元で管理する設定カードや鍵。

マネージドを使えば運用が消えるわけではありません。自前でクラスタを組んだ経験と比べて、何が残るのかを整理します。

前回: EC2は立てて壊す教材 — AWSの最初の1台 この記事は、読んで判断する回です。 手を動かすのは、自分のクラスタを見返す部分だけです。 この記事では EKS を作りません。理由は本文に書きます。

3台のクラスタを組んだ回を、思い出してください。

あの回で、kubeadm init を打つまでに何をしたか。 swap を止めて、カーネルモジュールを足して、containerd の設定ファイルを作り直して、SystemdCgroup = true に書き換えて、ufw のポートを8種類開けて、FORWARD ポリシーまで直しました。そこまでやって、ようやく kubeadm init の入口に立てました。

そして kubeadm init のあと、Node は NotReady のままでした。CNI が入っていなかったからです。

あれを全部やらなくても、Kubernetes が使えるサービスがあります。 AWS の EKS、Google Cloud の GKE、Azure の AKS。マネージド Kubernetes と呼ばれるものです。

ここで、当然こう思います。

じゃあ、あの3日間は何だったのか。

この記事は、その問いに答える回です。

先に結論を言っておきます。マネージドは「Kubernetes を簡単にする道具」ではありません。 「あなたがやっていた作業の、ある一部分だけを引き取るサービス」です。どこまでを引き取って、どこからは引き取らないのか。 その線が引けるかどうかが、この記事の全部です。

そしてその線は、自分で一度組んだ人にしか、正確には引けません。


対象レベル: 中級 / 区分: 必修

目次

この記事でわかること

  • マネージド Kubernetes が肩代わりするのは、主にコントロールプレーンの構築と維持であって、Kubernetes の使い方が易しくなるわけではないこと
  • ノードは結局ふつうの仮想マシンで、OS の更新やノードの故障は、消えてなくなるわけではないこと
  • 「マネージドだから安全」は成り立たないこと。権限設計・マニフェスト・イメージの中身・コストは、依然として自分の責任であること
  • コントロールプレーンには、Pod を1つも動かしていなくても時間あたりの費用がかかること。止め忘れが直接お金になる構造
  • Kubernetes が要らない場面のほうが、実は多いこと。1台のVMと Docker Compose で足りるものに Kubernetes を載せるのは、選択肢を狭めているだけだということ

この記事でやること

  1. 自分が組んだクラスタで「自分の手でやったこと」を、実際にコマンドで数え直す(クラスタを残している人だけ。消した人は読むだけで構いません)
  2. その一つひとつを、マネージドが肩代わりするかしないかの表と突き合わせる
  3. 責任分界点——マネージドにしても自分に残る仕事を確認する
  4. EKS の料金ページを実際に開いて、「何に対して課金されるのか」の項目だけを見る(作りません。読むだけです)
  5. いまの自分がマネージドへ移るべきかを、判断基準の表で決める

この記事で EKS を作らない理由

先に、はっきり書きます。

この記事では、EKS クラスタを1つも作りません。 そして、いまの段階で作ることを勧めません。

理由は3つです。

理由中身
① コントロールプレーンが時間課金Pod をゼロ個にしても、クラスタが存在する限り課金が続きます。 VMと違って「電源を切って止める」ができません
② 消し忘れが起きやすいクラスタ本体だけ消しても、ロードバランサー・EBS・NAT ゲートウェイ・Elastic IP が残ることがあります。残ったものにも課金されます
③ このサイトの方針VMware の中で完結させるのは、止め忘れても請求が来ないからです。常時稼働させるものを、学習の段階で持たない

「1日だけ試す」は、慣れた人には成り立ちます。 ただし成り立つのは、消し漏れがゼロだと確認できる人だけです。それが確認できる状態になるのが、この段階のあとの話です。

料金の具体的な数字は、この記事には書きません。 クラウドの価格は改定されます。リージョンによっても違います。 ここに数字を書けば、読んだ時点で古い可能性があります。 必ず公式の料金ページと、AWS Pricing Calculatorで、自分で確認してください。 この記事が扱うのは「何に対して課金されるのか」という項目の話だけです。


先に知る言葉

この記事で初めて出てくる言葉です。 基本的な言葉は用語集にもまとめてあります。

言葉意味
マネージドサービス構築と運用の一部を、クラウド事業者が代わりにやるサービス。あなたは「使う」側だけを持つ
EKSAWS のマネージド Kubernetes。Elastic Kubernetes Service の略
GKE / AKSそれぞれ Google Cloud / Azure のマネージド Kubernetes。役割は EKS と同じ
責任共有モデルどこまでが事業者の責任で、どこからが利用者の責任かを定めた考え方。クラウドを使う前提の知識
マネージドノードグループEKS で、ワーカーノード(EC2)をまとめて面倒見てもらう仕組み。ノード自体は消えない
Fargateノードを自分で持たずにコンテナを動かす方式。EC2 が見えなくなる代わりに、できないことも増える
EC2AWS の仮想マシン。あなたが VMware で立てたVMに相当するものが、クラウド上にある
IAMAWS の権限管理の仕組み。「誰が何をしてよいか」を決める。Kubernetes の RBAC とは別物
RBACKubernetes 側の権限管理。「このユーザーは Pod を消してよいか」を決める
コントロールプレーンクラスタの頭脳側(kube-apiserver / etcd / スケジューラ)。前回 cp1 として自分で立てたもの

① まず、自分が何をやったのかを数え直す

比較の前に、比較される側を思い出します。

クラスタをまだ残している人は、cp1 にログインして打ってください。 消した人・スナップショットに戻した人は、読むだけで構いません。

あなたが自分で入れたものを見る

cp1 で:

bash
$ dpkg -l | grep -E 'kubeadm|kubelet|kubectl|containerd'
hi  containerd.io   1.7.x   amd64  An open and reliable container runtime
hi  kubeadm         1.33.x  amd64  Command-line utility to bootstrap a Kubernetes cluster
hi  kubectl         1.33.x  amd64  Command-line utility for the Kubernetes API
hi  kubelet         1.33.x  amd64  Node agent for Kubernetes
部分意味
先頭の hih = hold(apt-mark hold で固定した)、i = installed。前回、勝手に上がらないよう自分で止めた印です
grep -E複数の語を | で並べて探す(Linuxコマンドの回)

この4つは、あなたが自分で入れて、自分でバージョンを固定しました。

証明書の期限を見る(ここが一番のです)

cp1 で:

bash
$ sudo kubeadm certs check-expiration
CERTIFICATE                EXPIRES                  RESIDUAL TIME   EXTERNALLY MANAGED
admin.conf                 Sep 05, 2027 12:00 UTC   364d            no
apiserver                  Sep 05, 2027 12:00 UTC   364d            no
apiserver-etcd-client      Sep 05, 2027 12:00 UTC   364d            no
etcd-server                Sep 05, 2027 12:00 UTC   364d            no
(以下略)

ここを、よく見てください。

RESIDUAL TIME(残り時間)が、およそ 364日 です。

あなたが kubeadm init を打った瞬間、有効期限1年の証明書が10枚ほど作られていました。 気づいていましたか。

1年後、これが切れます。 切れると kubectl が通らなくなり、クラスタが操作できなくなります。 自分で組んだクラスタでは、1年に一度 kubeadm certs renew を打つのは、あなたの仕事です。

[スクリーンショット: 01_証明書の期限.png] sudo kubeadm certs check-expiration の出力を撮ってください。RESIDUAL TIME の列が読める大きさでお願いします。「自分は1年後に作業がある状態を作った」と分かる1枚です。

これが、マネージドを説明するときの一番いい例です。 EKS では、この証明書の更新は AWS 側の仕事です。 あなたはコマンドを打ちません。そもそも kubeadm が存在しません。 そして、この作業が存在することを知らないまま EKS を使うと、「そういうものが要る」ということ自体を一生知らないままになります。

コントロールプレーンの中身を見る

cp1 で:

bash
$ kubectl get pods -n kube-system -o wide

kube-apiserver-cp1 / etcd-cp1 / kube-scheduler-cp1 / kube-controller-manager-cp1 が、cp1 の上で動いています。

この4つが、マネージドでは「見えなくなる」ものです。 EKS でも GKE でも、この Pod は一覧に出てきません。 事業者側のネットワークで動いていて、あなたには API のエンドポイント(URL)だけが渡されます。


② 突き合わせ表:あなたがやったことは、どこへ行くのか

ここが、この記事の本体です。 左の列は、全部あなたが実際に打ったことです。

消えるもの(マネージドが肩代わりする)

自分で組んだとき、あなたがやったことマネージド(EKS など)では
swap を止める(swapoff と fstab のコメントアウト)やらない。 用意されたノード用イメージが、最初からその状態
overlay / br_netfilter のモジュール読み込み、sysctl の書き換えやらない。 ノードイメージに設定済み
containerd を入れ、config default で作り直し、SystemdCgroup = true に直すやらない。 ここは前回、一番多く時間が溶けた場所です
kubeadm / kubelet / kubectl を入れ、apt-mark hold で固定やらない。 ノード側の kubelet は用意されたものが入っている
kubeadm init でコントロールプレーンを作るやらない。 作成ボタン相当の操作1回で、apiserver / etcd / スケジューラが向こう側に立つ
admin.conf を ~/.kube/config にコピーして持ち主を直すやらない。 認証情報はクラウド側の仕組み(IAM)から発行する
証明書の1年更新(kubeadm certs renew)やらない。 事業者の仕事
etcd のバックアップ(前回は触れていませんが、本番なら必須の仕事)やらない。 事業者が冗長化して持っている
コントロールプレーンの冗長化(HA構成)やらない。 最初から複数構成。前回「cp1 が落ちたら詰む」と書いた弱点は、ここで消えます
ufw のポートを8種類開け、DEFAULT_FORWARD_POLICY を直すやらない。 クラウド側のファイアウォール(セキュリティグループ)を設定する形に変わる
kubeadm join のトークンを控えて、ワーカーで打つやらない。 ノードグループに台数を指定すると、参加まで自動
クローンの後始末(machine-id / ホスト名 / SSHホスト鍵)やらない。 そもそもクローンしない
メモリとディスクの実機確認やらない。 足りなければ台数と種別を変えるだけ。ただし、それは費用の話に変わります

消えないもの(形が変わるだけ)

あなたがやったことマネージドでも残るが、形が変わる
CNI を入れる(Flannel を kubectl apply)CNI は残ります。 既定の実装が最初から入っている(EKS なら VPC CNI)。ただし「Pod にどのIPを配るか」は、あなたが設計します
ノードのOS更新残ります。 ノードは EC2、つまりただの仮想マシンです。更新のたびに新しいノードへ入れ替える運用になります
Kubernetes のバージョン上げ残ります。 「上げてください」と言われる側は、依然としてあなたです。サポート期限も来ます
ノードが落ちたときの挙動残ります。 Pod が別ノードに作り直されるまで数分かかるのは、EKS でも同じです。前回見たあの5分は、Kubernetes 本体の挙動だからです
kubectl を打つことまったく同じです。 get も describe も apply も変わりません

表の右側を上から読むと、気づくことがあります。 消えているのは、ほぼ全部「クラスタを立ち上げるまで」の作業です。 「立ち上がったあと、使い続ける作業」は、ほとんど残っています。


③ 責任分界点:マネージドでも、これは自分の責任

クラウドには「責任共有モデル」という考え方があります。 AWS の言い方では、クラウド“の”セキュリティは事業者、クラウド“における”セキュリティは利用者です(公式の説明)。

Kubernetes に当てはめると、こうなります。

項目誰の責任か補足
コントロールプレーンが動き続けること事業者apiserver / etcd の面倒
データセンターと物理機器事業者
マニフェストと Helm チャートの中身あなたreplicas を1にしたら、1台で落ちます。マネージドは止めてくれません
コンテナイメージの中身あなた古い依存、埋め込んだ秘密情報。中身は見てもらえません(セキュリティの回)
IAM と RBAC の権限設計あなたここが一番むずかしくなります。 自作クラスタでは admin.conf 1枚で済んでいたものが、クラウド側の権限と Kubernetes 側の権限の二階建てになります
Secret の扱いあなた「マネージドだから暗号化されている」ではありません。使う設定をするのはあなたです
ネットワークポリシー(Pod 間の通信制限)あなた既定では同じクラスタ内は素通しです。前回 Flannel を選んで「ポリシーは書けない」と触れた話の続き
リソース要求(requests / limits)とスケール設定あなた間違えるとノードが増え続けて、そのまま請求が増えます
監視とログの設計あなたPrometheus の回でやったことは、そのまま必要です
永続ボリュームの中身のバックアップあなたetcd は守られますが、あなたのデータベースの中身は別です
費用あなたこれが最大の変化点です。次の節
アプリのバグあなた当然ですが、書き落とすと表がきれいすぎるので書きます

表を眺めて、気づいてほしいことがあります。 「消えた仕事」は、どれも一度やれば済む種類の作業でした。 「残った仕事」は、どれもサービスが生きている限り続く種類の作業です。 マネージドが引き取ったのは、量としては多いけれど、期間としては短い部分です。


④ お金の話:止め忘れが、そのまま請求になる

VMware のVMと、クラウドの決定的な違いはここです。

VMware のVMクラウド(EKS)
止めるとどうなるか電源を切れば、ゼロクラスタが存在する限り、コントロールプレーンの課金は続く
消し忘れたらディスクを食うだけ請求が積み上がる
上限物理マシンの性能上限は、あなたが設定しない限り無い

何に対して課金されるのか(項目だけ)

金額ではなく、項目です。 これは仕組みの話なので、価格改定があっても構造は変わりません。

課金の対象中身
① コントロールプレーンクラスタ1つあたり、時間で課金。Pod がゼロでも発生します
② ワーカーノード中身は EC2 です。 台数 × 時間。「Kubernetes 料金」とは別に、普通の仮想マシン代がかかります
③ ディスク(EBS)ノードのディスクと、永続ボリューム
④ ロードバランサーService を LoadBalancer 型にすると、その裏で本物のロードバランサーが1台立ちます
⑤ NAT ゲートウェイプライベートなサブネットから外へ出るための出口。時間課金+通信量課金
⑥ データ転送外向きの通信量

④ と ⑤ が、初めての人が驚く場所です。 kubectl apply でマニフェストを1枚適用しただけで、課金対象のリソースが増えることがあります。 自作クラスタで NodePort を使っていたときは、何も増えませんでした。 「YAML を1行足す」が「請求書に1行増える」に繋がる。 これが、マネージドで最初に慣れる必要がある感覚です。

実際に見てほしいこと(作らずに、読むだけ)

Windows のブラウザで、EKS の料金ページを開いてください。

見るのは、金額ではなく次の2点です。

  1. 課金の単位が「クラスタあたり・時間あたり」だと書いてあること
  2. 「ワーカーノードの EC2 料金は別」と書いてあること

[スクリーンショット: 02_EKS料金ページ.png] EKS の料金ページを開いた画面を撮ってください。金額そのものではなく、「何に対して課金されるか」の見出しが読める範囲で構いません。

数字は、この記事には転記しません。 改定されるからです。 見積もりたくなったら AWS Pricing Calculator を使ってください。作らずに金額が出せます。 これも1円もかかりません。


⑤ 他の選択肢:EKS だけが答えではない

AWS が唯一のクラウドではありません。 そしてマネージド Kubernetes が唯一の正解でもありません。

他のマネージド Kubernetes

サービス特徴(詳細と価格は必ず公式で確認してください)
GKE(Google Cloud)Kubernetes を作った側のサービス。Autopilot モードでは、ノードの管理まで含めて任せる形が選べます
AKS(Azure)Windows 環境や Active Directory と組み合わせる場面で選ばれることが多い(ADの回)
国内クラウド(さくらのクラウド など)請求も問い合わせも日本語。データを国内に置きたい要件があるときの選択肢。提供状況は変わるので、必ず公式で確認してください

どれも「Kubernetes を動かす」という一点では同じです。kubectl の打ち方は変わりません。 違うのは、周辺(権限・ネットワーク・ロードバランサー・請求)が、そのクラウドの流儀になることです。 だから「Kubernetes を覚える」と「そのクラウドを覚える」は、別々の学習です。前者は、あなたはもう済ませています。

そして「Kubernetes を使わない」という選択

正直に書きます。

個人開発や、少人数のサービスの大半は、Kubernetes を必要としません。

規模・状況妥当な選択
1台のVMで足りる。落ちても数十分で直せるDocker Compose 1枚で十分。運用の対象が1台で済みます
サーバーの面倒を見たくないPaaS(コードを渡すと動かしてくれる形)。Kubernetes を触らずに済みます
コンテナは使いたいが、クラスタは要らないAWS ECS や Google Cloud Run のような、Kubernetes ではないコンテナ実行環境
アクセスがほぼ無い1台の VPS で十分。nginx リバースプロキシの回の構成そのまま

Kubernetes が本当に効くのは、こういう場面です。

  • サービスが複数あって、それぞれ別のチームが触る
  • 止まると本当に困る(数分の停止が、金額や信用に直結する)
  • 負荷が時間帯で大きく変わる
  • 同じ構成を、開発・検証・本番で何度も作り直す

逆に言うと、これに当てはまらないのに Kubernetes を入れると、 アプリの問題ではなく クラスタの問題を直す時間が増えます。前回、SystemdCgroup と ufw の FORWARD ポリシーで消えた時間が、そのまま毎月やってきます。


⑥ では、あの3日間には意味があったのか

この記事を書いている理由が、ここです。

マネージドを使えば、前回やったことの大半は不要になります。 それは事実です。では、無駄だったのか。

次のような場面を考えてみてください。

EKS を使っていて起きること自分で組んだ経験があると
Node が NotReady になった「CNI か kubelet か」と、切り分けの先が思い浮かぶ。 自分で NotReady を1回見ているから
Pod が Pending のまま動かない「置き場所が無いのか、taint か」と考えられる。前回 describe で理由を読んだから
ノードを落としたのに数分止まった「そういう仕様だ」と知っている。 障害だと勘違いして騒がない
Pod 同士が繋がらない「CNI の層の問題では」と、層を分けて考えられる。 UDP 8472 で詰まった記憶があるから
費用が想定より高い「ノードは EC2 だ」と分かっているので、台数から疑える
「マネージドだから大丈夫ですよね?」と聞かれる「コントロールプレーンは大丈夫。マニフェストと権限は私たちの責任です」と答えられる

マネージドが隠したのは、作業であって、仕組みではありません。 中で起きていることは、まったく同じです。apiserver があり、etcd があり、スケジューラが置き場所を決め、kubelet が Pod を起こしている。 それを一度、自分の手で立てて、自分の手で壊したかどうか。 その差は、画面に出るエラーの読み方に、そのまま出ます。

「自動化されたものを使う人」と「自動化されたものを直せる人」の差は、たいてい、一度手でやったかどうかです。障害対応の回で書いた「切り分けの順番」も、同じ話でした。


⑦ 判断基準:いつマネージドへ移るか

「そのうち移る」では判断になりません。表にします。

見るところまだ移らなくていい移ることを検討する移るべき
人数自分1人2〜3人で触る担当が交代する / 引き継ぎが起きる
止まってよい時間半日止まっても平気数時間なら許容数分でも困る
運用に割ける時間触るのが楽しい・学習が目的月に数時間なら出せるアプリを書く時間しか取れない
サーバー台数1〜3台5台前後増減が読めない・自動で増やしたい
お金費用をゼロにしたい月々の固定費を許容できる人件費のほうが高くつくと分かっている
データの重み消えても作り直せるバックアップは取っている消えたら事業が止まる

一番右の列に3つ以上当てはまったら、移る理由があります。 一番左に3つ以上当てはまるなら、いま移るのは早いです。 費用と学習機会を両方失います。

そして、いまこの記事を読んでいる段階の人は、ほぼ全員が「一番左」です。 それでいいのです。移るときが来たときに、この記事を読み返せるようにしておくのが、いまやることです。


つまずいたところ

「マネージドなら簡単」だと思っていた

最初はそう思っていました。 実際には、EKS を使い始めるには、Kubernetes とは別に、VPC・サブネット・IAM ロール・セキュリティグループの理解が要ります。

自作クラスタでは、admin.conf を1枚コピーすれば kubectl が通りました。 マネージドでは、クラウド側の権限と Kubernetes 側の権限が二階建てになります。楽になったのはクラスタ構築で、代わりにクラウドの知識という別の山が生えました。

「ノードも見なくていい」と思っていた

違いました。 ノードは EC2 です。OS の更新も、ディスクの空きも、コストも、全部そこにあります。

Fargate を使えばノードが見えなくなるという話は本当ですが、その代わりにできなくなること(特権が要る処理、ノードに直接置くタイプのボリュームなど)があります。「見えない」は「無い」ではありません。

料金の記事を鵜呑みにしかけた

検索して出てきた個人ブログの金額を、そのまま見積もりに使いそうになりました。 2年前の記事でした。

クラウドの価格は改定されます。リージョンでも違います。無料枠の条件も変わります。 この記事に数字を書かないのは、同じ事故を読者に起こさないためです。必ず公式の料金ページと Pricing Calculator を見てください。

「まず EKS で試そう」としかけた

この記事を書くにあたって、実際に1つ作って確かめようとしました。やめました。

理由は、消し忘れが怖かったからではありません。 「消したつもりで残っているもの」を、自分がまだ全部言えなかったからです。ロードバランサー、EBS ボリューム、NAT ゲートウェイ、Elastic IP。 これらを確実に確認できるようになってから触る、という順番にしました。

この判断自体が、この記事の結論と同じ形をしています。 中で何が作られるか分からないうちは、作らない。


まとめ

  • マネージド Kubernetes が肩代わりするのは、ほぼ「クラスタを立ち上げるまで」の作業。swap、containerd、CNI 導入、join、証明書、HA構成
  • kubeadm certs check-expiration の RESIDUAL TIME は約1年。 自作クラスタは、1年後に自分で更新する仕事を抱えている
  • kube-apiserver / etcd / スケジューラは、マネージドでは Pod 一覧から消える。 見えなくなるだけで、動いていることに変わりはない
  • ノードは結局 EC2、つまりただの仮想マシン。 OS更新・故障・費用は残る
  • ノードが落ちてから Pod が移るまで数分かかるのは、EKS でも同じ。 Kubernetes 本体の挙動だから
  • 責任分界点。マニフェスト・イメージの中身・IAM と RBAC・Secret・リソース設定・監視・データのバックアップ・費用は、全部あなたの責任
  • 権限は二階建てになる。 admin.conf 1枚で済んでいたものが、クラウド側と Kubernetes 側に分かれる
  • コントロールプレーンは、Pod がゼロでも時間課金。 VMのように「電源を切ってゼロ」にはできない
  • kubectl apply が課金対象を増やすことがある。 LoadBalancer 型の Service はロードバランサーを実際に1台立てる
  • 金額は記事に書かない。改定されるから。 公式料金ページと Pricing Calculator を見る
  • GKE / AKS / 国内クラウドも同じ役割。 kubectl は変わらない。変わるのは周辺の流儀
  • 個人開発と少人数のサービスの大半は、Kubernetes を必要としない。 1台のVMと Docker Compose、あるいは PaaS で足りる
  • Kubernetes が効くのは、複数チーム・止まると困る・負荷が変動する・同じ構成を何度も作る場面
  • 移る判断は、人数・許容停止時間・運用に割ける時間・台数・費用・データの重みの6つで決める
  • 自分で組んだ経験は消えない。 マネージドが隠したのは作業であって、仕組みではない。 エラーが出たときの読み方に、そのまま差が出る

参考リンク


次に読む

この記事は 【第7段階】公開する の 4 / 10 本目です。

記事
← 前の記事EC2は立てて壊す教材 — AWSの最初の1台
→ 次の記事クラウド料金は止め忘れで膨らむ — 先に上限を作る

上から順に読めば積み上がるように並べています。 飛ばしても構いませんが、詰まったら前の回に戻ってください。

全体の順路は はじめに にあります。

roadmap.sh のどこをやっているか

DevOps/Kubernetes›Cloud Providers / Container Orchestration
  • マネージドKubernetes(EKS / GKE / AKS)
  • 責任共有モデル
  • いつ移るかの判断

この記事は、上の項目を実際に手を動かして確かめる回です。

よかったらシェアしてね!
  • URLをコピーしました!
  • URLをコピーしました!

コメント

コメントする

目次