インシデント対応の6段階 — 焦って消したのは証拠

インシデント対応の6段階。対応手順書と証拠のフォルダ、時計とチェックリスト。

最初にサーバーが乗っ取られたかもしれない、と思ったとき、私は最悪の一手を打ちました。

前回: マルウェアを見分けて隔離する — シグネチャは万能ではない

これは【深掘り】の記事です。本線の順路ではありません。 読まなくても先へは進めます。本線のセキュリティ点検の回で「安全にはできない、被害を小さくする」と書きました。この深掘りシリーズは、その一言を守る側の視点だけで分解し直す連載です。 今回のテーマは「起きたあとにやること」――事件が起きてしまってからの動き方です。

このシリーズは守る側だけを書きます。 攻撃の手順は扱いません。攻撃コードも、他人のホストへ侵入・スキャンする方法も書きません。この記事に出てくる who や last のような確認コマンドは、すべて自分のVMの状態を調べるためのもので、他人のホストに向けて使うものではありません。実験はすべて自分のホストの中(自分のVMの中)だけで行います。 守り方を書くのに、攻め方を書く必要はありません。

見慣れないプロセスがVMの中で動いているのに気づいて、頭が真っ白になったのです。「入られた」と思った瞬間、私がやったのは――VMをまるごと作り直すことでした。 スナップショットも取らず、ログも見ず、いきなり sudo reboot して、それでも不安で、最後はイメージから入れ直しました。「きれいな状態に戻せば安心だ」と思ったのです。

戻せました。VMは、確かにきれいになりました。でも、そのあとで私は、取り返しのつかないことに気づきました。

私は、証拠を全部消していました。 そのプロセスが何だったのか、どこから入られたのか、何を持っていかれたのか。調べる材料を、自分の手で、全部消してしまったのです。だから、原因も分かりませんでした。原因が分からないということは、同じ穴がまだ開いているということです。きれいにしたVMを立て直しても、そこにまた同じ経路で入られる。私は「復旧」したつもりで、再発の準備をしていただけでした。

そのとき痛いほど分かったのは、これでした。事件が起きてから「どうしよう」と考えるのでは、もう遅い。 パニックの中で正しい順番を思い出すのは無理です。だから守る側は、起きる前に「起きたらこう動く」を決めておきます。 この記事は、その決まった動き方――事件が起きたあとの6つの段階を、自分のVMを題材に、実際に手順書を書きながら組み立て直します。

対象レベル: 中級〜上級 / 区分: 発展

目次

この記事でわかること

  • インシデント対応の山場は「起きたあと」ではなく「起きる前(準備)」にあること。連絡先・手順書・バックアップ・ログ保存を先に用意していないと、本番では何もできないこと
  • 「本当にインシデントか、ただの誤検知か」を切り分ける(特定)ことが対応の入口で、いきなり大騒ぎしても、いきなり無視しても事故になること
  • 封じ込めで、いちばんやってはいけないのが「証拠を消すこと」だということ。あわてて再起動・初期化すると、メモリ上の証拠が消える。「隔離するが、状態は保存する」が鉄則であること
  • 原因(侵入経路・仕込まれたもの)を取り除かずに復旧すると、必ず再発すること(根絶)。きれいに戻すことと、穴を塞ぐことは別
  • 復旧は「バックアップから戻せる」と事前に確かめてあって初めて成り立つこと。取っただけで試したことのないバックアップは、いざというとき戻せない
  • 終わったあとに人を責めず、仕組みを直す(教訓)こと。そして、パニックでも手が動くようにランブック(手順書)を先に書いておくと、判断が要らなくなること

この記事でやること

  1. 自分のVMに、「侵入を疑ったときにまず打つ確認コマンド一覧」を手順書として実際に書き、それらのコマンドを自分のVMに対して打って、何が見えるかを確かめる
  2. 「これはインシデントか、誤検知か」を切り分けるための判断基準を紙に書き出す(前回のIDSの誤検知の話につなげる)
  3. 封じ込めの練習として、VMを「初期化せずに隔離し、状態ごと保存する」手順(スナップショット・ネットワーク切り離し)を確かめる
  4. 仕込まれたものを探す観点(新しいユーザー・cron・自動起動・SSH鍵)を一覧にして、自分のVMで実際に確認コマンドを打つ
  5. バックアップから本当に戻せるかを、練習用のファイルで実際に試す(取るだけでなく、戻す)
  6. 自分のVM用の小さなランブック(SSHで不審なログインを見つけたときの手順)を書き、個人開発でどこまで準備するかを判断表で決める

先に知る言葉

この記事で初めて出てくる言葉です。 基本的な言葉は用語集にもまとめてあります。

言葉意味
インシデントセキュリティ上の「事件」。侵入・情報漏えい・改ざん・サービス停止など、守りたいものが実際に脅かされた(かもしれない)出来事
インシデント対応事件が起きたときの、決まった動き方の全体。この記事で扱うSANSの6段階がそれ
準備(Preparation)起きる前にやっておくこと。連絡先・手順書・バックアップ・ログの保存を先に用意しておく
特定(Identification)起きたことが本当にインシデントか、誤検知かを切り分け、範囲を見極めること
封じ込め(Containment)被害がこれ以上広がらないよう、まず止める・切り離すこと
根絶(Eradication)侵入の原因(入口・仕込まれたもの)を取り除くこと
復旧(Recovery)正常な状態へ戻すこと。きれいなバックアップから戻し、監視を強めて本番へ
証拠保全あとで「何が起きたか」を調べられるように、状態やログを消さずに残すこと
揮発性の証拠電源を切ると消える証拠。メモリの中身・動いているプロセス・今の通信など。再起動で失われる
ランブック(Runbook)「この状況ならこう動く」を書いた手順書。パニックでも手が動くようにするための台本

これだけ先に置いておけば、本文で止まらずに読めます。では、6つの段階を、順に組み立てます。


全体像 — SANSの6段階を先に1枚で

個々の段階に入る前に、全体の地図を渡します。事件が起きたときの動き方には、決まった順番があります。この記事で使う6段階(準備・特定・封じ込め・根絶・復旧・教訓)は、教育機関の SANS がまとめた枠組み(頭文字で PICERL)です。公的機関の NIST(米国立標準技術研究所)も SP 800-61 でインシデント対応を定めています。旧版(Rev.2)は4フェーズのライフサイクルでしたが、2025年4月の Rev.3 で CSF 2.0 の6つの機能(統治・識別・防御・検知・対応・復旧)に沿った形に改められました。考え方は共通するので、この記事は動きやすい6段階で進めます。

この記事では、それを6つの段階として扱います。

段階一言でいうといちばん大事な注意
① 準備起きる前に、道具と手順を用意する山場はここ。 起きてから考えるのでは遅い
② 特定本物のインシデントか、誤検知かを切り分けるいきなり大騒ぎも、いきなり無視も事故
③ 封じ込め被害の拡大を止める・切り離すここで証拠を消さない
④ 根絶原因(入口・仕込み)を取り除く残したまま復旧すると再発する
⑤ 復旧正常な状態へ戻す「戻せる」と事前に確かめてあるか
⑥ 教訓振り返って、次に活かす人を責めず、仕組みを直す

この順番には意味があります。特に見落とされやすいのが、「①準備がいちばん重い」ことと、「③封じ込めより先に、証拠を消してはいけない」ことです。私が冒頭で失敗したのは、②③を飛ばして、いきなり⑤(きれいに戻す)に走ったからでした。順番を守ることが、この記事のいちばんの学びです。

順番を間違えると、何が起きるか

この6段階は、覚えるためのラベルではありません。間違えると、実際に取り返しがつかなくなる順番です。私の失敗を、この順番に当てはめてみます。

私がやったこと本来の段階何を飛ばしたか
プロセスを見て「入られた」と思った②特定の入口②の切り分けをせず、いきなり本物と断定
すぐ reboot した③封じ込め のつもり③の「証拠を残す」を飛ばして「消す」をやった
イメージから入れ直した⑤復旧 のつもり③④を飛ばして、いきなり⑤へ
(原因は分からずじまい)④根絶④を丸ごと飛ばした → 再発の準備

飛ばした結果は、はっきりしています。③で証拠を消したから、④で原因を調べられず、原因を消さずに⑤で戻したから、また入られる。 1つ順番を飛ばすと、そのあとの段階が全部、砂上の楼閣になります。だから、この記事はテクニックの寄せ集めではなく、「順番」そのものを学ぶ回なのです。

ひとつ、先に強調しておきます。この6段階は、輪になっています。 ⑥の教訓が、次の①の準備を厚くします。1回事件を経験するたびに、準備が良くなり、次の対応が速くなる。やりっぱなしにせず、必ず①へ戻す――それがライフサイクル(循環)と呼ばれる理由です。


① は「事前」にある — 準備(Preparation)

いきなり結論を置きます。インシデント対応でいちばん大事なのは、起きたあとの動きではありません。起きる前の準備です。

意外に聞こえるかもしれません。「対応」というくらいだから、起きてからが本番だと思ってしまいます。でも、実際にやってみると分かります。パニックの中では、準備していないことは一切できません。

なぜ「起きてから考える」では間に合わないのか

事件の最中は、平常時とはまったく違う状態になります。

  • 時間がない。 被害は今この瞬間も広がっているかもしれない。落ち着いて調べる余裕がない
  • 頭が回らない。 「入られた」という動揺で、普段なら分かる判断ができなくなる(私が reboot を打ったのがこれです)
  • 手が足りない。 一人で、止める・調べる・戻す・連絡する、を同時にやることになる

この状態で、「さて、バックアップはどこにあったかな」「ログの保存期間は足りているかな」「誰に連絡すればいいんだっけ」を考え始めたら、もう手遅れです。これらは全部、平常時に、落ち着いているときに決めておくものです。準備とは、「事件のときに考えなくていいことを、先に全部片づけておく」ことです。

準備で用意しておく4つ

守る側が事前に用意しておくものは、大きく4つです。

用意するものなぜ事前でないと駄目か
連絡先誰に知らせるか(自分・共同開発者・レンタルサーバーの窓口・利用者)。事件中に調べ始めると遅れる
手順書(ランブック)「この状況ならこう動く」の台本。パニックでも手が動く。⑦で実際に書く
バックアップ戻す先。取ってあるだけでなく、戻せると確かめてあることが条件(⑤で試す)
ログの保存「何が起きたか」を調べる材料。事件が起きてから取り始めても、過去は記録されていない

このうち、いちばん軽視されがちなのがログの保存です。ログは「あとで調べる材料」ですが、事件が起きた瞬間に取り始めても、その前に何が起きていたかは分かりません。 過去は、平常時から記録し続けていた分しか残っていないのです。だから準備の段階で、「どのログを・どれくらいの期間・どこに」残すかを決めておきます。ログを取り、離れた場所に集めておく話は、本線の監視とログの回と地続きです。ここでの目的が「障害調査」から「侵入調査」に変わるだけで、やることは同じです。

連絡先も、事件の前に書いておく

「連絡先なんて、いざとなれば思い出せる」と思うかもしれません。でも、パニックの中では、当たり前のことほど出てきません。誰に・どうやって知らせるかを、平常時に一覧にしておきます。

個人開発でも、連絡先は意外とあります。

  • 自分自身(別の連絡手段。VMに入れなくなっても届く先)
  • 共同開発者(いれば)
  • レンタルサーバー/VPSの窓口(本番がそこにあるなら。障害・不正利用の連絡先)
  • ドメインの管理元(乗っ取りがドメインに及んだ場合)
  • (本番で利用者がいるなら)利用者への告知手段(お知らせページ・SNSなど)

大事なのは、「知らせるべき相手を、事件の最中に思い出さなくていい」状態にしておくことです。特に本番サービスなら、利用者に「何が起きて、何をすべきか(例:パスワードを変えてください)」を伝えるのも、対応の一部です。黙って直すのは、時に利用者への裏切りになります。ここは⑦のランブックの末尾に「連絡先」欄を作って、そこに書き込んでおきます。中身の秘密(パスワードなど)は書かず、連絡先だけにしてください。

ログは「侵入されたら真っ先に消される」もの

もう一段、大事な話をします。攻撃者が中に入ると、真っ先にやることの一つが「ログを消すこと」です。自分が入った痕跡を消せば、調べられないからです。

つまり、守りたいサーバーの中にだけログを置いておくと、いざというとき、そのログごと消されている恐れがあります。だから準備の段階で、ログを別の場所へも送っておくのが定石です。ログを1か所に集める仕組み(本線のログを1画面にする回で扱いました)は、障害調査だけでなく、「消されても手元に残る証拠」という意味でも効きます。1台の中のログは消せても、別の場所へ流れたコピーまでは消せないからです。

手を動かす: 「まず打つ確認コマンド一覧」を手順書にする

では、準備を実際にやります。「侵入を疑ったときに、まず打つ確認コマンド一覧」を、自分のVMの中に手順書として書きます。

大事な前提を、もう一度確認します。これから並べるコマンドは、すべて「自分のVMの、今の状態を見るだけ」のものです。 誰かを攻撃するものではありません。むしろ逆で、「自分のサーバーで、今、誰が・何をしているか」を知るための、守る側の道具です。見るだけなので、状態は何も変わりません。

VMの中のLinux(Ubuntu Server)で、置き場所を作ります。前回作った ~/security-notes があれば、その中に足します。

bash
$ mkdir -p ~/security-notes
$ nano ~/security-notes/first-look.md

中身は、こういう手順書にします。「何を疑って、何を見るか」をセットで書くのがコツです。コマンドだけ並べても、パニックのときには「で、これで何が分かるんだっけ」となるからです。

# 侵入を疑ったら、まずこれを見る(自分のVMに対してだけ)

## 1. 今、誰がログインしているか
who        # ログイン中のユーザーと、接続元
w          # 何をしているかも一緒に

## 2. 過去に誰がログインしたか
last       # ログイン履歴(新しい順)
last -a    # 接続元を末尾に表示

## 3. 今、どこと通信しているか
ss -tnp    # 確立している接続(相手のIPが見える)
ss -tlnp   # 待ち受けているポート(開いている入口)

## 4. 今、何が動いているか
ps aux           # 全プロセス
ps aux --sort=-%cpu | head   # CPUを食っている順

## 5. 認証ログに、失敗や成功の痕跡はないか
sudo grep "Failed password" /var/log/auth.log   # 失敗
sudo grep "Accepted"        /var/log/auth.log   # 成功したログイン

## 6. 仕込まれていないか(④で詳しく)
crontab -l          # 自分の定期実行
ls -la ~/.ssh/      # 覚えのないSSH鍵が増えていないか

書けたら、実際に上から打ってみます。平常時に一度打っておくのが大事です。理由は2つあります。1つは、コマンドが自分のVMで本当に動くか、事前に確かめておくため。もう1つは、「いつもの状態」を目に焼き付けておくためです。平常時を知らなければ、事件のときに「いつもと違う」に気づけません(前回の異常検知と同じ理屈です)。

まず、今ログインしているのが自分だけか。

bash
$ who
$ w

次に、今このVMがどこと通信していて、どのポートが開いているか。

bash
$ ss -tnp
$ ss -tlnp

[スクリーンショット: 01_first_look.png] VMのターミナルで who・last・ss -tlnp を順に実行し、ログイン中のユーザー・ログイン履歴・待ち受けポートが表示されている画面を撮ってください。表示される内容は、あなたのVMの状態によって違って構いません。

表示される内容は、あなたのVMの状態によって違って構いません。大事なのは、「今の自分のVMは、こういう状態が普通だ」を知っておくことです。この“普通”が、②で「いつもと違う」を判断する物差しになります。

この手順書ができた時点で、あなたはもう準備の一歩目を踏み出しています。事件のとき、ゼロから考えるのではなく、この first-look.md を開いて上から打つだけでよくなったからです。パニックの中で必要なのは、判断ではなく台本です。

確認は「消えやすい順」に見る

もう一つ、準備のときに覚えておくと差がつく考え方があります。証拠には「消えやすいもの」と「残りやすいもの」があり、消えやすいものから先に見る、という順番です。専門的には「揮発性の順(order of volatility)」と呼ばれます。

なぜ順番が大事か。①の手順書を思い出してください。上のほう(who・ss・ps)は、今この瞬間の状態です。ログイン中の相手も、確立している接続も、動いているプロセスも、電源を切れば消えるし、時間が経てば変わってしまいます。 一方、下のほう(/etc/passwd・cron・ファイル)は、ディスクに書かれているので、しばらく残ります。

消えやすさ見るもの対応するコマンド
とても消えやすい今の接続・今のプロセス・メモリss -tnp / ps aux
消えやすいログイン中のユーザーwho / w
わりと残る認証ログの履歴grep ... /var/log/auth.log
残るユーザー・cron・鍵・ファイル/etc/passwd / crontab -l

だから、事件のときは「今の状態(消えやすいもの)」を先に記録して、それからディスクの中をゆっくり調べます。①の手順書を、消えやすい順に並べておいたのは、このためでした。この順番を体に入れておくと、③の封じ込めで「何を先に残すか」の判断も速くなります。


② 気づく・確定する — 特定(Identification)

準備ができたら、次は「起きたこと」に気づいて、それが本当にインシデントかどうかを見極める段階です。これを特定(Identification)といいます。

ここでいきなり難所があります。「アラートが鳴った=インシデント発生」ではないことです。

いきなり大騒ぎも、いきなり無視も、どちらも事故

前回の検知の回で、検知には必ず誤検知(正常を攻撃と間違える)が混ざる、という話をしました。しきい値をどう置いても、誤検知はゼロにできませんでした。ということは――鳴ったアラートの多くは、実は誤検知なのです。

ここで、2つの間違った反応があります。

  • いきなり大騒ぎする。 アラート1つで「侵入された!」と③の封じ込めに突入し、正常なサービスを止めてしまう。誤検知だったら、自分でサービスを落としただけになる
  • いきなり無視する。 「どうせまた誤検知だろう」で流す。前回話した「オオカミ少年」で、本物のときに手遅れになる

守る側がやるのは、その中間です。鳴ったものを、あわてず・軽んじず、「本物か・誤検知か」を切り分ける。 これが特定の中身です。

何をもって「インシデント」と判断するか

では、どこで線を引くのか。事前に基準を決めておくのが答えです(また準備の話です)。基準がないと、その場の気分で「大したことない/大変だ」を決めることになり、ぶれます。

判断の材料になるのは、たとえばこういう問いです。

見る観点誤検知の可能性が高いインシデントの可能性が高い
ログインの成功/失敗失敗だけが続いている(入られてはいない)失敗のあとに「成功」がある(入られた可能性)
接続元いつもの自分のIP見覚えのない国・IPからのログイン成功
時間帯いつも作業している時間誰も触っていないはずの深夜に活動
プロセス見慣れた、自分が起動したもの覚えのないプロセスが通信している
変更自分が加えた変更自分が触っていないファイル・ユーザー・設定が変わっている

大事なのは右列の「成功したログイン」です。失敗が何千回続いても、それは「入られていない」ことの証拠です(前回のfail2banが数えていたのは、この失敗でした)。危険なのは、失敗の山のあとに、ぽつんと Accepted(成功)があるときです。①の手順書に grep "Accepted" を入れたのは、このためでした。

手を動かす: 切り分けの基準を紙に書く

②でやることは、コマンドを打つことではなく、判断基準を先に決めておくことです。~/security-notes に、判断メモを作ります。

bash
$ nano ~/security-notes/triage.md

中身は、自分の環境に合わせて、「これが起きたら本物として扱う」の線を書きます。

# これが起きたら「インシデント」として③へ進む

- [ ] 見覚えのないIP・国からの SSH ログイン「成功」がある
- [ ] 自分が作っていないユーザーが増えている
- [ ] 覚えのないプロセスが外部と通信している
- [ ] crontab や自動起動に、書いた覚えのないものがある
- [ ] ~/.ssh/authorized_keys に、覚えのない鍵が増えている
- [ ] Webやアプリのファイルが、自分が触っていないのに変わっている

# これは「様子見(誤検知の可能性)」でよい

- ログインの「失敗」だけが続いている(成功はない)
- fail2ban がいつもの総当たりを遮断している(想定内)

この線を先に引いておくと、事件のときに「これは本物か?」で悩まなくて済みます。上のチェックが1つでも当たったら、③へ進む。当たらなければ、様子を見ながらログを残す。判断の代わりに、チェックリストで動けるようにするのが、守る側のやり方です。

例で切り分ける: 同じ「大量の失敗ログイン」でも、結論が正反対

抽象的なので、具体的な場面で切り分けを追ってみます。ある朝、あなたはfail2banの通知や auth.log を見て、「昨夜、何千回ものSSHログイン失敗があった」ことに気づきました。ここで、2つの結末があります。

ケースX(誤検知・様子見でよい)

Failed password for invalid user admin from 203.0.113.10 ...   ← 何千行
Failed password for invalid user test  from 203.0.113.10 ...
("Accepted" の行は、どこにも無い)

失敗だけが並び、成功(Accepted)が1行も無い。これは「総当たりが来たが、入られてはいない」典型です。世界中のサーバーには、こうした自動の総当たりが毎日来ます。fail2banがちゃんと遮断していれば、これはインシデントではありません。 様子を見て、ログを残しておけば十分です。

ケースY(本物・③へ進む)

Failed password for invalid user admin from 203.0.113.10 ...   ← 何千行
...
Accepted password for user from 198.51.100.55 port 40122 ssh2   ← 成功が1行

失敗の山の中(または直後)に、見覚えのないIPからの Accepted(成功)が混じっている。しかもその成功のあとに、who で今もそのセッションが生きていたり、ps に覚えのないプロセスがあったりする。これは本物として扱います。 迷わず③へ進みます。

同じ「大量の失敗」から始まっても、成功が1行あるかどうかで、結論は正反対になります。②の切り分けとは、この1行を見つけられるかどうか、という具体的な作業なのです。だから①の手順書に grep "Accepted" を入れておきました。「怖い数字(失敗の山)」に気を取られず、「本当に危ない1行(成功)」を見る――これが特定のコツです。

ここまでが「気づいて、本物だと確定する」段階です。本物だと分かったら、いよいよ止めに入ります。 ただし――ここからが、私がいちばん失敗したところです。


③ 封じ込め — ここで証拠を消さない(Containment)

この記事の山場です。ゆっくり行きます。

インシデントだと確定しました。被害は今も広がっているかもしれない。まず、止めなければなりません。 この「被害の拡大を止める」段階を、封じ込め(Containment)といいます。

封じ込めの目的は2つです。

  • 被害をこれ以上広げない(横に広がるのを止める。他のサーバーや、外への持ち出しを止める)
  • 証拠を保全する(あとで「何が起きたか」を調べられるように、状態を残す)

そして、この2つはしばしばぶつかります。 ここが、私が転んだところです。

私の失敗: 「止める」を「消す」でやってしまった

もう一度、冒頭の失敗を思い出します。私は「止めたい」一心で、VMを再起動し、イメージから入れ直しました。 確かに、動いていた悪いプロセスは止まりました。被害も止まったように見えました。

でも、私がやったのは「止める」ではなく「消す」でした。

再起動した瞬間に、メモリの中身が全部消えました。 動いていたプロセスが何だったのか、どこと通信していたのか、メモリの上にだけあった痕跡――電源を切ると消えるもの(揮発性の証拠)が、まるごと蒸発したのです。イメージから入れ直したので、ディスクの証拠も消えました。

結果、私は「どこから・どうやって入られたか」を永遠に調べられなくなりました。止めることには成功して、調べることに完全に失敗したのです。そして原因が分からないまま立て直したVMは、同じ穴が開いたままでした。

鉄則: 「隔離するが、状態は保存する」

ここから学んだ鉄則が、これです。

封じ込めとは「隔離」であって「初期化」ではない。切り離すが、状態は消さずに保存する。

「止める」にも、いろいろなやり方があります。証拠を消す止め方と、証拠を残す止め方があるのです。

やり方被害は止まるか証拠は残るか評価
いきなり再起動・電源断止まる消える(メモリの証拠が蒸発)やってはいけない
いきなり初期化・入れ直し止まる全部消える最悪。私の失敗
ネットワークから切り離す広がりは止まる残る(動いたまま隔離)◎ 基本はこれ
スナップショットで状態ごと保存(切り離しと併用)メモリごと残る◎ 証拠保全の要

正しい封じ込めは、下2つです。外との通信を切って被害の拡大を止めつつ、VMは動いたまま・状態を保ったまま隔離する。 そのうえで、消える前に状態を保存する。

VMだからこそできる、証拠を残す隔離

ここで、私たちがVMで作業していることが、大きな武器になります。物理サーバーだと難しい「状態ごとの保存」が、VMなら簡単にできるからです。

  • ネットワークから切り離す。 VMware なら、そのVMの「ネットワークアダプタ」を接続解除する。VMは動き続けたまま、外との通信だけが切れる。被害の拡大(外への持ち出し・他への横展開)が止まる
  • スナップショットを、メモリごと取る。 VMware のスナップショットは、メモリの状態も一緒に保存できます。 これは、揮発性の証拠(動いているプロセス・メモリの中身・今の接続)を、丸ごと凍結して残すということです。冒頭の私が取るべきだったのは、まさにこれでした

私が reboot で消したものを、スナップショットは凍らせて残します。 「初期化して安心」ではなく「凍らせて隔離」。これが、VMで学ぶ最大の利点の一つです。

VMware のコンソールで、対象のVMを右クリック →「スナップショット」→「スナップショットの取得」で、「仮想マシンのメモリをスナップショットに含める」にチェックを入れて取ります。ネットワークの切り離しは、VMの設定で「ネットワークアダプタ」の「接続済み」のチェックを外します。どちらもVMを止めずにできます。

[スクリーンショット: 02_snapshot.png] VMware のスナップショット取得ダイアログで「仮想マシンのメモリをスナップショットに含める」にチェックが入っている画面を撮ってください。

メニューの文言はバージョンによって少し違うことがありますが、「メモリを含める」の選択肢があるかどうかを見てください。ここにチェックがあれば、揮発性の証拠を残せます。

怪しいプロセスにも、いきなり kill -9 を打たない

VMの中で「怪しいプロセスが動いている」のを見つけると、反射的に強制終了(kill -9)で殺したくなります。 でも、封じ込めの段階では、これも証拠を消す行為になりえます。

殺す前に、そのプロセスの情報を先に記録します。 何者で、どこと通信していて、どのファイルから起動したのか。

bash
$ ps aux | grep <怪しいプロセス名>
$ sudo ls -l /proc/<PID>/exe
$ sudo lsof -p <PID>

/proc/<PID>/exe は「そのプロセスが、どの実行ファイルから起動したか」を指しています。lsof -p は「そのプロセスが、今どのファイルや通信を開いているか」を見せます。これらを記録してから止める。 いきなり kill -9 で消すと、この情報ごと消えます。強制終了を最初の一手にしない考え方は、本線ではなく深掘りのプロセスの回(kill -9を最初に打たない)でも扱いました。あそこでは「行儀よく止める」ためでしたが、ここでは「証拠を残して止める」という、もう一つの理由が加わります。

手を動かす: 「証拠を残す隔離」の手順を書いておく

これも、事件のときに考えていては遅いので、手順として先に書いておきます。

bash
$ nano ~/security-notes/containment.md
# 封じ込め:止める前に、消さない(自分のVMに対してだけ)

## 絶対にやらないこと
- いきなり reboot / shutdown(メモリの証拠が消える)
- いきなりイメージから入れ直す(全部消える)
- いきなり kill -9(プロセスの証拠が消える)
- ログを消す・上書きする

## やること(この順で)
1. VMware で、対象VMのネットワークアダプタを「接続解除」する
   → 外との通信だけ止まる。VMは動いたまま
2. VMware で、メモリを含めたスナップショットを取る
   → 揮発性の証拠を凍結して残す
3. 怪しいプロセスは、殺す前に ps / ls -l /proc/PID/exe / lsof で記録
4. ここまでやってから、必要ならプロセスを止める

「止める」と「消す」を分ける。 この一枚があるだけで、パニックのときに私と同じ失敗をせずに済みます。封じ込めは、被害を止めながら、次の④(調べて原因を突き止める)の材料を残す段階なのです。

いつ切るか — 早さと、調べやすさのバランス

封じ込めには、もう一つ悩みどころがあります。「今すぐ切るか」「もう少し様子を見てから切るか」です。

大きな組織では、あえてすぐには切らず、監視を強めて観察を続けることがあります。切ってしまうと、攻撃者に「気づかれた」と悟られ、証拠を消されたり、別の裏口に逃げられたりするからです。どこまで被害が及んでいるかを見極めてから、一斉に切りたい、という判断です。

ただし、これは「観察している間も被害は広がりうる」というリスクを引き受ける、上級者の判断です。専門のチームと、被害を封じ込められる隔離環境があって、初めて成り立ちます。

個人開発の結論は、はっきりしています。迷わず、すぐ切ってください。

  • 一人で「観察しながら被害を抑える」を同時にやるのは無理
  • 泳がせている間に被害が広がるほうが、失うものが大きい
  • そして――すぐ切っても、証拠は失われません。 ③でメモリ込みスナップショットを取れば、「切る直前の状態」が丸ごと凍結されるからです

ここが大事です。大組織が「切ると証拠が消える」と悩むのは、状態を保存する手立てが限られるからでした。でも私たちは、スナップショットで状態を凍結できます。 だから「すぐ切る」と「証拠を残す」を両立できる。早さを取っても、調べやすさを失わない。 これも、VMで学ぶ利点の一つです。

なぜVMだと、ここまで有利なのか

少し立ち止まって、VMで学んでいることのありがたさを確認しておきます。もし冒頭の私が、物理サーバー(VMではない実機)を使っていたら、どうだったでしょうか。

物理サーバーで「メモリの状態ごと保存する」のは、専用の道具と知識が要る、かなり難しい作業です。うっかり電源を抜けば、揮発性の証拠は即座に消えます。「動いたまま切り離して、状態を凍結する」ことが、簡単にはできません。

ところがVMは、メモリもディスクも、ソフトウェアが管理しているファイルにすぎません。 だから、

  • ネットワークアダプタの接続解除という数クリックで、VMを止めずに外との通信だけ切れる
  • メモリ込みスナップショットという数クリックで、動いている状態を丸ごとファイルに凍結できる
  • あとから、その凍結した状態を別のVMとして開いて、じっくり調べられる

つまり、プロが専用機材でやる「証拠保全」の初歩を、VMなら数クリックで体験できるのです。このシリーズがずっと「作業はVMの中で」と言ってきた理由が、ここでも効いています。壊しても戻せるだけでなく、事件を安全に再現し、証拠を残す練習ができる――これがVMの、守る側にとっての価値です。

時刻も、証拠のうち

もう一つ、地味だけれど大事なことがあります。「いつ、何をしたか」の時刻を記録しておくことです。③でネットワークを切った時刻、スナップショットを取った時刻、プロセスを止めた時刻。これらを⑥のタイムラインに書けるよう、メモしておきます。

なぜ時刻が要るか。あとで④の調査をするとき、「この変更は、自分が対応で触ったものか、それとも攻撃者が触ったものか」を見分ける必要があるからです。自分がいつ何をしたかを記録していないと、自分の対応の跡と、攻撃の跡が区別できなくなります。 だから、封じ込めの最中でも、簡単でいいので「何時何分に、何をした」を残します。これも、③の containment.md に一行「時刻を必ずメモする」と書いておけば忘れません。


④ 根絶 — 原因を残すと、必ず再発する(Eradication)

封じ込めで、被害の拡大を止め、証拠を保全しました。次は、原因そのものを取り除く段階です。これを根絶(Eradication)といいます。

ここでの合言葉は、これです。

きれいにすることと、穴を塞ぐことは別。 原因を残したまま復旧すると、同じ経路でまた入られる。

冒頭の私は、ここを飛ばしました。「きれいなイメージから入れ直す」で満足して、「そもそも、なぜ入られたのか」を突き止めませんでした。 だから、立て直したVMには同じ穴が開いていました。根絶とは、その穴を見つけて塞ぐ作業です。

根絶でやる2つのこと

根絶は、大きく2つに分かれます。

  1. 侵入経路(入口)を特定して塞ぐ。 どこから入られたのか。弱いSSHパスワードだったのか、古いソフトの穴だったのか、漏れた .env のパスワードだったのか。塞がなければ、また同じ入口を使われる
  2. 仕込まれたものを取り除く。 入ったあとに置いていったもの。増やされたユーザー、仕込まれた定期実行(cron)、勝手に登録された自動起動(サービス)、追加されたSSH鍵。これらを残すと、入口を塞いでも、置き土産から戻ってこられます

2つ目が特に厄介です。入口だけ塞いで安心すると、攻撃者が仕込んだ「裏口」から、また入られるからです。だから、置いていかれたものを一つずつ探して消す必要があります。

手を動かす: 「仕込まれていないか」を確認する観点一覧

自分のVMで、実際に確認コマンドを打って、「いつもと違うものがないか」を見ます。これも、平常時に一度打って“普通”を知っておくと、事件のとき差分に気づけます。全部、見るだけのコマンドです。

覚えのないユーザーが増えていないか。

bash
$ cut -d: -f1,3 /etc/passwd
$ grep -v nologin /etc/passwd

/etc/passwd は、このVMのユーザー一覧です。自分が作った覚えのないユーザー、特にログインできる(nologin でない)ユーザーが増えていたら赤信号です。

覚えのない定期実行(cron)が仕込まれていないか。

bash
$ crontab -l
$ sudo ls -la /etc/cron.d/ /etc/cron.daily/

cron は「決まった時刻に自動で動く」仕組みです(ツールの回で扱いました)。ここに覚えのないものがあれば、定期的に何かを実行される裏口になっている恐れがあります。

覚えのない自動起動(サービス)が登録されていないか。

bash
$ systemctl list-unit-files --type=service --state=enabled

enabled になっているサービスは、再起動しても自動で立ち上がります。 「startとenableは別物」という話を第1段階でやりました。攻撃者が「再起動しても戻ってくる裏口」を作るなら、まさにここに enable で仕込みます。覚えのないサービスがないか見ます。

SSHの鍵が勝手に増えていないか。

bash
$ cat ~/.ssh/authorized_keys

authorized_keys は「この鍵を持っている人は、パスワードなしでログインできる」というファイルです。ここに覚えのない鍵が1行足されているだけで、攻撃者はいつでも入れます。 入口を塞いでも、この鍵が残っていれば意味がありません。

これらを1回ずつ打って、「今の自分のVMの、普通の状態」をメモしておきます。 事件のときは、このメモと見比べて、「増えているもの・変わっているもの」を探します。それが、仕込まれたものです。

他の段階と同じく、確認する観点を1枚のチェックリストにしておくと、事件のとき漏れなく見られます。

bash
$ nano ~/security-notes/eradication.md
# 根絶:入口を塞ぎ、置き土産を消す(自分のVMに対してだけ)

## 入口を塞ぐ
- [ ] どこから入られたか特定(弱いパスワード / 古いソフト / 漏れた鍵)
- [ ] SSHをパスワード禁止・鍵認証のみにする など、入口を塞ぐ

## 置き土産を消す(裏口)
- [ ] /etc/passwd に覚えのないユーザーは?
- [ ] ~/.ssh/authorized_keys に覚えのない鍵は?
- [ ] crontab -l / /etc/cron.d/ に覚えのない定期実行は?
- [ ] enabled なサービスに覚えのない自動起動は?

## 自信が持てないなら
- [ ] きれいなバックアップから作り直す(証拠は③で保全済み)

入口と裏口の両方が並んでいるのが大事です。片方だけでは根絶になりません。

根絶が難しいとき: 迷ったら「作り直す」

正直に言います。「置いていかれたものを全部見つけきった」と確信するのは、とても難しいです。1つでも見落とすと、そこから戻ってこられます。プロの世界でも、深く入られた場合は「きれいにする」ことをあきらめ、信頼できるバックアップから作り直す(再構築する)ことを選びます。

ここで、③との順番が効いてきます。先に証拠を保全してあれば、作り直しても調査はできます。証拠(スナップショット)は残したまま、本番は作り直す。冒頭の私は「作り直す」を選んだこと自体は間違っていませんでした。間違っていたのは、証拠を残す前に作り直したことです。順番さえ守れば、「作り直す」は正しい根絶になります。

入口を塞いでも、裏口が残る — 具体例で見る

「入口だけ塞いでも足りない」を、具体的な流れで見ておきます。仮に、次のような侵入だったとします(これは調査で分かる“結果”を並べたもので、攻撃の手順ではありません)。

  1. 弱いSSHパスワードで、user としてログインされた(入口)
  2. 入ったあと、~/.ssh/authorized_keys に自分の鍵を1行足された(裏口A)
  3. さらに、enabled なサービスを1つ登録された(裏口B:再起動しても戻ってくる)

ここで、入口(弱いパスワード)だけを塞ぐと、どうなるでしょうか。SSHをパスワード禁止・鍵認証のみにして、「もう総当たりでは入れない」と安心する。ところが――裏口Aの鍵は、まだ残っています。 パスワードを禁止しても、authorized_keys に足された鍵を持っている相手は、堂々と正規の鍵認証で入れます。 さらに裏口Bのサービスは、再起動のたびに立ち上がって、外へ通信を試みるかもしれません。

つまり、入口を塞いだのに、攻撃者は前より簡単に(鍵で)入れるという、笑えない状態になります。根絶とは、入口を塞ぐことと、この裏口A・Bを一つずつ見つけて消すことの両方なのです。だから④の確認一覧に、鍵とサービスとcronが並んでいました。「どこから入ったか」だけでなく「入ったあと、何を置いていったか」まで見て、初めて根絶です。

そして、この「置き土産を全部見つけきれたか」に自信が持てないからこそ、深く入られた場合は「作り直す」を選びます。裏口A・Bを1つでも見落とすリスクより、信頼できる状態から作り直すほうが確実だからです。

そして、この「作り直す」を成り立たせるのが、次の⑤――信頼できるバックアップです。


⑤ 復旧 — 「戻せる」と確かめてあって初めて成り立つ(Recovery)

原因を取り除いたら、正常な状態へ戻します。 これを復旧(Recovery)といいます。多くの人が「ここがゴール」だと思いますが、実は復旧には、事前の準備が必要でした。

取っただけのバックアップは、いざというとき戻せない

復旧の中心は、バックアップから戻すことです。④で「深く入られたら作り直す」と言いましたが、その戻し先がバックアップです。

ところが、ここに落とし穴があります。

バックアップは「取ってある」だけでは足りない。「戻せる」と確かめてあって、初めて意味がある。

これは何度も言われることですが、実際にやられます。バックアップは取っている。でも、戻したことは一度もない。 いざ事件が起きて戻そうとしたら、ファイルが壊れていた、手順が分からない、バックアップに肝心のデータが入っていなかった――こうして、「バックアップはあるのに戻せない」が起きます。バックアップは、取る作業ではなく、戻せる状態を保つ作業なのです。

このテーマは、本線の作品づくりの回――公開の前に、戻せることを確かめる回で一度扱いました。あそこでは「デプロイして失敗したときに戻す」話でしたが、インシデントからの復旧も、まったく同じです。戻せることを、事件の前に確かめておく。

復旧は「戻して終わり」ではない

復旧には、もう一つ注意があります。戻した瞬間が、いちばん危ないということです。

  • 戻したシステムに、まだ同じ穴が残っていないか(④の根絶が甘いと、戻した先でまた入られる)
  • 攻撃者が「戻ってくるのを待っている」かもしれない

だから復旧では、監視を強めながら、慎重に本番へ戻します。 いきなり全開で公開するのではなく、ログをいつもより厚く見て、「また同じ兆候が出ないか」を見張りながら戻す。この「監視を強める」は、①で準備したログと、前回の検知の仕組みが効いてくるところです。

具体的には、戻したあと、しばらくの間こういうものを、いつもより頻繁に見ます。

  • 認証ログの「成功」(grep "Accepted")。同じ相手が、また入ってこないか
  • ~/.ssh/authorized_keys や /etc/passwd。消したはずの裏口が、また足されていないか
  • 外への通信(ss -tnp)。覚えのない相手と、また話していないか
  • fail2ban の遮断状況。同じIPからの試行が、また増えていないか

これらは、②の特定で見たものと同じです。違うのは頻度です。平常時よりこまめに見て、「攻撃者が戻ってきていないか」を確かめながら、少しずつ通常運用へ戻していきます。ここで一つでも兆候が出たら、それは④の根絶が甘かったサインです。復旧は、戻して終わりではなく、「戻ってこないことを確かめる」ところまでが仕事です。

なお、「わざと壊して、戻す練習をする」という考え方は、本線の障害対応の回(わざと壊して直す)で一度やりました。戻す手順は、平常時に練習しておくもの――これはセキュリティの復旧でも、障害対応でも、まったく同じ作法です。

手を動かす: バックアップを「取って、壊して、戻す」まで通す

言葉だけでは身につかないので、実際に戻すところまでやります。本物のシステムでやると危ないので、練習用のフォルダで、「取る→壊す→戻す」の一周を体験します。すべて自分のVMの中です。

まず、練習用のデータを作ります。

bash
$ mkdir -p ~/recovery-demo/site
$ echo "大事なデータ v1" > ~/recovery-demo/site/data.txt
$ ls ~/recovery-demo/site

これを、バックアップとして別の場所に固めます(tar でまとめる話は別の回で扱いました。ここでは戻すことが主役なので、コマンドは追わなくて大丈夫です)。

bash
$ mkdir -p ~/recovery-demo/backup
$ tar czf ~/recovery-demo/backup/site-backup.tar.gz -C ~/recovery-demo site
$ ls -la ~/recovery-demo/backup

ここで、「取っただけ」で満足しないのがこの節の主題です。次に、わざとデータを壊します(事件で改ざんされた、を再現します)。

bash
$ echo "改ざんされた" > ~/recovery-demo/site/data.txt
$ rm -f ~/recovery-demo/site/data.txt   # あるいは丸ごと消えた想定
$ cat ~/recovery-demo/site/data.txt 2>/dev/null || echo "データが失われた"

そして、いよいよバックアップから戻します。 ここが本番です。

bash
$ tar xzf ~/recovery-demo/backup/site-backup.tar.gz -C ~/recovery-demo
$ cat ~/recovery-demo/site/data.txt

大事なデータ v1 と表示されれば、戻せました。 この「実際に戻して、中身を目で確認した」という経験が、準備の最後のピースです。「取ってある」ではなく「戻せると確かめた」――この差が、事件のときに効きます。

バックアップは、取った回数ではなく、戻せた回数で信頼できます。一度も戻したことのないバックアップは、あるかどうか分からない、と考えてください。

バックアップは「置き場所」も分ける — 3-2-1

もう一つ、インシデントの文脈で大事なことがあります。バックアップを、守りたいサーバーと同じ場所にだけ置かないことです。

考えてみてください。もしバックアップを、同じVMの中(~/recovery-demo/backup のように、同じディスクの中)にだけ置いていたら――そのVMごと乗っ取られたり、暗号化されたりしたら、バックアップも一緒にやられます。 ①でログを別の場所へ送ったのと、まったく同じ理屈です。同じ場所にある予備は、本体と一緒に失われます。

だから、バックアップの世界には「3-2-1」という有名な目安があります。

数字意味
3データのコピーを、本体を含めて3つ持つ
22種類の違う保存先に置く(同じ壊れ方をしないように)
1そのうち1つは、本体から離れた場所(別のマシン・外部)に置く

個人開発で全部を厳密にやる必要はありません。でも、「1つは、そのVMの外に置く」――これだけは意識する価値があります。今回の練習では同じVMの中に置きましたが、実運用では、たとえば別のマシンや、電源を切って保管する外付けディスクなど、本体と運命を共にしない場所へ、もう1つコピーを持っておく。これが、⑤の復旧を本当に成り立たせます。

片づけは、練習用フォルダを消すだけです(後片づけの節でまとめます)。


⑥ 教訓 — 人を責めず、仕組みを直す(Lessons Learned)

戻せました。もう安心――ではありません。インシデント対応の最後の段階が、いちばん次に効きます。 終わったあとに振り返って、次に活かす。これを教訓(Lessons Learned)、または事後分析(ポストモーテム)といいます。

なぜ「振り返り」を省いてはいけないか

事件が片づくと、心底ほっとします。もう思い出したくない。だから、振り返りは真っ先に省かれます。 でも、ここを省くと、こうなります。

  • 同じ穴が、また使われる(今回の原因を、仕組みとして塞いでいないから)
  • 次のときも、同じように慌てる(今回の反省が、手順書に反映されないから)

冒頭の私が「証拠を消した」失敗も、振り返って言葉にしたからこそ、この記事の①〜③になりました。振り返りは、次の準備(①)を厚くする作業です。だから6段階は輪になっていて、⑥から①へ戻ります。

「誰のせいか」ではなく「なぜ起きたか」

振り返りで、いちばん大事な作法があります。

人を責めない。仕組みを直す。

事件のあと、つい「誰がやったんだ」「なぜ気づかなかったんだ」と、人を探したくなります。でも、人を責める場にすると、次から誰も本当のことを言わなくなります。 「自分のミスがバレると怒られる」場所では、人はミスを隠します。ミスが隠されると、原因が見えなくなり、仕組みを直せなくなります。

だから守る側は、犯人探しではなく、「どういう仕組みだったから、これが起きたのか」を問います。

  • 「なぜ弱いパスワードで入られたのか」→ 人を責めるなら「誰が弱いパスワードにした」。仕組みを直すなら「弱いパスワードを設定できてしまう状態を、どう塞ぐか(鍵認証を必須にする、など)」
  • 「なぜ気づくのが遅れたのか」→ 人を責めるなら「なぜ見ていなかった」。仕組みを直すなら「気づける通知の仕組みが無かった。どう足すか」

この「報告しやすい文化」こそが、実は最強の防御です。前回までのシリーズでも、監視やログの話で「気づける状態を作る」と繰り返してきましたが、その気づきを共有できる空気が無ければ、仕組みは育ちません。

手を動かす: タイムラインを1枚書く

振り返りの具体的な形は、タイムライン(時系列の記録)です。事件を、責めるためではなく、学ぶために、順番に並べます。

bash
$ nano ~/security-notes/postmortem.md
# ポストモーテム(人ではなく、仕組みを見る)

## 何が起きたか(時系列)
- 00:00 ○○のアラートが鳴った
- 00:10 first-look.md の手順で確認、成功ログインを発見
- 00:20 ネットワークを切り離し、メモリ込みでスナップショット
- 00:40 侵入経路を特定(例:弱いSSHパスワード)
- 01:30 バックアップから復旧、監視を強化

## なぜ起きたか(仕組みの問題として)
- 例:パスワードログインを許可したままだった

## 次にどう直すか(人ではなく仕組み)
- [ ] SSHをパスワード禁止・鍵認証のみにする
- [ ] fail2ban を実運用の設定に戻す
- [ ] ログを別の場所へも送る

## 準備(①)に足すこと
- [ ] first-look.md に、今回見て役立ったコマンドを追記

このメモの価値は、次の①(準備)に直結することです。「次にどう直すか」と「準備に足すこと」が、そのまま次の事件への備えになります。1回の事件を、次の防御に変える。これが、輪を回すということです。

「一人だから振り返らなくていい」は間違い

「人を責めない」と言われても、一人で開発しているなら、そもそも責める相手がいない――だから振り返りは要らないのでは、と思うかもしれません。これは、よくある誤解です。

一人でも、振り返りは要ります。理由は2つあります。

  • 未来の自分は、他人と同じくらい忘れる。 半年後の自分は、今回どう対応したかを覚えていません。だから「次にこう直す」を書いておかないと、次の事件でまた同じ順番を思い出せずに慌てます。振り返りメモは、未来の自分への引き継ぎ書です
  • 「仕組みを直す」は、一人でも同じ。 弱いパスワードで入られたなら、直すべきは「気をつける」という気持ちではなく、「パスワードログインを禁止する」という設定です。気持ちで再発を防ごうとすると、必ずまた起きます。 一人でも、責めるのではなく仕組みを直す、は成り立ちます

そして、いつか共同開発者ができたとき。「報告しやすい空気」を最初から作れるかどうかが効いてきます。誰かがミスを見つけたとき、責められると思えば隠します。隠されれば原因が見えません。前回までのシリーズで「気づける状態を作る」と繰り返してきましたが、気づいた人が安心して声を上げられなければ、その気づきは共有されません。 振り返りを「犯人探し」ではなく「仕組み直し」の場にする習慣は、一人のうちから練習しておく価値があります。

事件の重さで、振り返りの深さを変える

とはいえ、毎回の総当たり(②のケースX)まで、いちいち重い振り返りをする必要はありません。事件の重さに合わせて、振り返りの深さを変えます。

事件の重さ例振り返りの深さ
軽い(入られていない)いつもの総当たり。fail2banが遮断メモ1行。「想定内」で流す
中くらい設定ミスで一時的に外へ晒した(実害は無さそう)原因と直し方を数行。準備に反映
重い(入られた)見覚えのないログイン成功。仕込みを発見タイムラインをきちんと書く。仕組みを直す

大事なのは、「重い事件を軽く扱わない」ことと、「軽い事件で燃え尽きない」ことの両方です。全部を重く扱うと疲れて続かず、全部を軽く扱うと本物を見逃します。②の切り分け(本物か誤検知か)が、ここでも効いてくるわけです。


⑦ 手順書を持っておく — パニックでも手が動くランブック(Runbooks)

最後です。ここまでの①〜⑥を貫いていた、いちばん実用的な道具を、はっきり形にします。ランブック(Runbook)――「この状況ならこう動く」を書いた手順書です。

なぜランブックが要るのか

もう、理由は繰り返し出てきました。事件の最中は、判断ができないからです。時間がなく、頭が回らず、手が足りない。その状態で、正しい順番を思い出すのは無理です。

だから、思い出す代わりに、読む。 判断する代わりに、上から実行する。ランブックは、そのための台本です。飛行機のパイロットが、非常時に暗記に頼らずチェックリストを読み上げるのと同じ発想です。訓練された人でさえ、非常時は台本を読むのです。私たちが判断で乗り切れるはずがありません。

ランブックがあると、こう変わります。

ランブックが無いとランブックがあると
何から手を付けるか、その場で考える開いて、上から実行する
順番を間違える(私のように、先に消す)順番が固定されている
大事な手順を飛ばす飛ばさない(チェックしながら進む)
人によって対応がばらつく誰がやっても同じになる

手を動かす: 「SSHで不審なログインを見つけたとき」のランブックを書く

抽象的なランブック論で終わらせず、具体的な状況を1つ選んで、実際に書きます。 個人開発でいちばんありそうな「SSHで不審なログイン成功を見つけたとき」を題材にします。①〜⑥の中身を、この状況向けに1本にまとめるイメージです。

bash
$ nano ~/security-notes/runbook-ssh.md
# ランブック:SSHで不審なログイン成功を見つけたら
# (自分のVMに対してだけ。他人のホストには使わない)

## 0. 落ち着く。この台本を上から実行する。判断しない。

## 1. 本物か確認する(特定)
- [ ] sudo grep "Accepted" /var/log/auth.log で成功ログインの接続元を見る
- [ ] 自分のIPか? 見覚えのないIPなら本物として2へ

## 2. 証拠を残して隔離する(封じ込め)※ここで消さない
- [ ] VMware でネットワークアダプタを「接続解除」
- [ ] VMware でメモリ込みのスナップショットを取る
- [ ] 怪しいプロセスは殺す前に ps / lsof -p / ls -l /proc/PID/exe で記録
- [ ] reboot も rm も、まだしない

## 3. 原因を探す(根絶)
- [ ] /etc/passwd に覚えのないユーザーは?
- [ ] ~/.ssh/authorized_keys に覚えのない鍵は?
- [ ] crontab -l / enabled なサービスに仕込みは?
- [ ] 入口を特定して塞ぐ(例:SSHをパスワード禁止・鍵のみに)

## 4. 戻す(復旧)
- [ ] きれいなバックアップから戻す(戻せるか事前に確認済み)
- [ ] 監視を強めて、しばらく様子を見る

## 5. 振り返る(教訓)
- [ ] postmortem.md にタイムラインを書く
- [ ] 人ではなく仕組みを直す
- [ ] この runbook に、今回の学びを追記する

## 連絡先
- 自分 / 共同開発者:
- レンタルサーバーの窓口:
- (本番なら)利用者への告知手段:

[スクリーンショット: 03_runbook.png] VMのエディタで runbook-ssh.md を開き、特定・封じ込め・根絶・復旧・教訓の手順がチェックリスト形式で並んでいる画面を撮ってください。

中身は、あなたの環境に合わせて変えて構いません。大事なのは、「事件のときに、これを開けば動ける」一枚を、平常時に作っておくことです。

ランブックは、書くだけでなく、一度なぞる

ランブックにも、⑤のバックアップと同じ落とし穴があります。「書いてある」だけでは足りないのです。書いた手順が、実際に自分のVMで動くとは限りません。

  • ランブックに書いた grep "Accepted" /var/log/auth.log は、あなたのVMで本当に結果が出ますか(ログの場所が違うかもしれません)
  • 「ネットワークアダプタを接続解除」の操作を、実際にVMwareで見つけられますか
  • 「メモリ込みスナップショット」を、迷わず取れますか

これらを、平常時に一度、上から順になぞっておきます。 事件のときに初めて「あれ、このコマンド、うちのVMだと何も出ない」と気づくのが、いちばん困ります。飛行機のパイロットが、緊急時のチェックリストを平常時の訓練で何度もなぞるのと同じです。一度もなぞっていない手順書は、いざというとき動かないと考えてください。

なぞってみて、うまくいかなかったところは、その場でランブックを直します。「書く→なぞる→直す」を一周させて、初めてランブックは信頼できる台本になります。 これは①の準備の総仕上げでもあります。

個人開発では、どこまで準備するか — 判断表で締める

とはいえ、個人開発で、企業のような大げさな体制を作る必要はありません。前回までと同じく、「リスク(確率×被害)で、やることを選ぶ」を、ここでも使います。何を用意し、何を省くかを、判断表にします。

準備すること個人開発での位置づけまずやるか
バックアップを取り、戻せると確かめる復旧の土台。これが無いと復旧が成り立たない必ずやる
メモリ込みスナップショットの取り方を知る封じ込めの要。VMなら数クリック。証拠を消さずに済む必ず知っておく
first-look.md(まず打つ確認コマンド)事件のとき、ゼロから考えずに済む。作るのは軽い作る
runbook-ssh.md(不審ログイン時の手順)パニックでも動ける台本。1状況ぶんでいい作る
triage.md(本物か誤検知かの基準)大騒ぎ/無視の両方を防ぐ。数行でいい作る
ログを別の場所へ送る消されても残る証拠。端末やサービスが増えたら効く規模が育ったら
専任の対応体制・24時間監視企業の話。個人には過剰要らない

個人開発の結論はシンプルです。 大げさな体制は要りません。まず「戻せるバックアップ」と「メモリ込みスナップショットの取り方を知っていること」。この2つがあれば、③封じ込めと⑤復旧という、いちばん失敗しやすい2か所を守れます。あとは、first-look.md と runbook-ssh.md という数十行のメモを書いておくだけ。準備は、規模ではなく、順番を守れるかどうかです。冒頭の私に足りなかったのは、体制でも道具でもなく、「消す前に、切り離して残す」というたった一つの順番でした。


つまずいたところ

1. 侵入を疑って、いきなりVMを初期化した。 「きれいに戻せば安心」と思って reboot し、イメージから入れ直した。止まったのは事実だが、証拠を全部消し、原因が分からなくなった。 原因不明のまま立て直したので、同じ穴が開いたまま。「止める」を「消す」でやってしまったのが最大の失敗。

2. 対応は起きてから考えればいい、と思っていた。 事件の最中は、時間がなく・頭が回らず・手が足りない。その状態で正しい順番を思い出すのは無理だった。 準備(①)とは「事件のときに考えなくていいことを、先に片づけておく」ことだと分かった。山場は起きたあとではなく、起きる前。

3. アラート1つで、いきなり封じ込めに突入しかけた。 検知には必ず誤検知が混ざる(前回)。鳴っただけで本物扱いすると、誤検知でも自分でサービスを止めてしまう。 逆に無視すれば本物を見逃す。「本物か誤検知か」を切り分ける(②特定)が、対応の入口だった。

4. 「失敗ログインの山」を見て、入られたと思い込んだ。 失敗が続くのは「入られていない」証拠。危ないのは、失敗の山のあとに Accepted(成功)があるとき。 見るべきは失敗の数ではなく、成功の有無だった。

5. 怪しいプロセスを、反射的に kill -9 で殺した。 殺す前に ps / lsof -p / ls -l /proc/PID/exe で記録しておくべきだった。強制終了は、プロセスの証拠も一緒に消す。 止める前に、残す。

6. バックアップを「取っている」で安心していた。 一度も戻したことがなかった。取ってあるだけでは、いざというとき戻せない。 練習用フォルダで「取る→壊す→戻す」を一周して、初めて「戻せる」と確かめられた。バックアップは取った回数ではなく、戻せた回数で信頼する。

7. 復旧したら終わり、だと思っていた。 戻した瞬間がいちばん危ない(穴が残っていれば、また入られる)。監視を強めながら慎重に戻すのが復旧。そして、根絶(④)が甘ければ、復旧しても再発する。

8. 振り返りを省いていた。 事件が片づくと、思い出したくなくて振り返らなかった。教訓(⑥)を省くと、同じ穴がまた使われ、次も同じように慌てる。 振り返りは、次の準備を厚くする作業だった。

9. つい「誰のせいか」を探した。 人を責める場にすると、次から本当のことを誰も言わなくなり、原因が隠れる。責めるべきは人ではなく仕組み。 「弱いパスワードにできてしまう状態」を直すのが、正しい振り返りだった。


後片づけ

この記事で作ったのは、自分のVMの中のメモと、練習用のフォルダだけです。他人のホストには何も触れていないので、片づけるのも自分のVMの中だけです。

まず、⑤で作った練習用フォルダは、消して構いません。

bash
$ rm -r ~/recovery-demo

③でメモリ込みのスナップショットを練習で取った場合は、VMware のスナップショットマネージャーから削除できます(ディスクを消費するので、練習ぶんは消しておくと良いです)。ネットワークアダプタを「接続解除」で試した場合は、「接続済み」に戻すのを忘れないでください(外につながらなくなります)。

~/security-notes に作った各メモ(first-look.md / triage.md / containment.md / postmortem.md / runbook-ssh.md)は、このシリーズを通して使う、あなたの準備そのものです。消さずに残しておくことを強くおすすめします。ただし、連絡先以外の秘密の値(パスワードや鍵そのもの)は書かないことだけ守ってください。

who last ss ps grep getent cat などは、すべて見るだけのコマンドなので、設定は何も変えていません。戻す作業は要りません。


まとめ — 理解できたこと

  • インシデント対応の山場は「起きたあと」ではなく「起きる前(準備)」にある。 事件の最中は判断できないので、考えなくていいことを先に片づけておく
  • 準備で用意するのは連絡先・手順書・バックアップ・ログの保存の4つ。特にログは、事件が起きてから取り始めても過去は分からない
  • ログは侵入されると真っ先に消される。 だから別の場所へも送っておく。1台の中のログだけでは、消された時点で証拠が失われる
  • 「本物のインシデントか、誤検知か」を切り分ける(特定)が対応の入口。 いきなり大騒ぎも、いきなり無視も事故になる
  • 見るべきは失敗ログインの数ではなく、失敗の山のあとに「成功」があるかどうか。成功があれば、入られた可能性が高い
  • 封じ込めで、いちばんやってはいけないのが「証拠を消すこと」。 いきなり再起動・初期化すると、メモリ上の証拠(揮発性の証拠)が蒸発する
  • 正しい封じ込めは「隔離するが、状態は保存する」。VMなら、ネットワークを切り離し、メモリ込みでスナップショットを取れば、動いたまま証拠を凍結できる
  • 怪しいプロセスも、いきなり kill -9 しない。 殺す前に、何者でどこと通信しているかを記録する
  • 原因(入口・仕込まれたもの)を取り除かずに復旧すると、必ず再発する(根絶)。 きれいにすることと、穴を塞ぐことは別
  • 仕込みは、増やされたユーザー・cron・自動起動サービス・SSH鍵に残る。入口だけ塞いでも、置き土産の裏口から戻られる
  • 復旧は「戻せる」と事前に確かめてあって初めて成り立つ。 取っただけで一度も戻したことのないバックアップは、いざというとき戻せない
  • 戻した瞬間がいちばん危ない。 監視を強めながら慎重に本番へ戻す
  • 終わったら振り返る(教訓)。人を責めず、仕組みを直す。 責める場にすると、次から本当のことが共有されなくなる
  • 6段階は輪。 教訓が次の準備を厚くする。1回の事件を、次の防御に変える
  • ランブック(手順書)があれば、パニックでも判断せずに動ける。 個人開発なら、戻せるバックアップとメモリ込みスナップショットの取り方、それに数十行のメモで十分

参考リンク


次に読む

この記事は 【深掘り】セキュリティ の 15 / 23 本目です。

記事
← 前の記事マルウェアを見分けて隔離する — シグネチャは万能ではない
→ 次の記事フォレンジックは原本に触らず調べる — 触ると証拠が変わる

上から順に読めば積み上がるように並べています。 飛ばしても構いませんが、詰まったら前の回に戻ってください。

全体の順路は はじめに にあります。

roadmap.sh のどこをやっているか

›Security — Incident Response
  • 準備が山場
  • 焦って証拠を消さない

この記事は、上の項目を実際に手を動かして確かめる回です。

よかったらシェアしてね!
  • URLをコピーしました!
  • URLをコピーしました!

コメント

コメントする

目次