ディスクとファイルシステム fstab・LVM — 消しても空き容量が戻らない

ディスクとファイルシステム。ディスク装置と容量メーター、追加できる収納ブロック。

※本記事はアフィリエイト広告(PR)を含みます。

ファイルを消したのに空きが戻らないことがあります。fstabとLVMを触って、ディスクの構成を確かめます。

前回: systemdのユニットファイル — Afterは依存関係ではない

これは深掘りです。本線の順路ではありません。 本線のファイルの置き場所の回で「Linux にドライブレターは無い。ディスクは木の枝としてマウントする」と書きました。この記事は、そのマウントを自分の手でやる回です。飛ばしても本線は進みます。

この記事のコマンドは、すべて Ubuntu Server の中で打ちます。 Windows の PowerShell ではありません。 ただし「VMware の画面で操作する」と書いてある箇所だけは Windows 側です。区別が付かなくなったらプロンプトを見てください。ユーザー名@ホスト名:~$ なら Linux の中です。

ある日、サーバーがこう言い出します。

bash: cannot create temp file for here-document: No space left on device

このメッセージが出た瞬間、多くの人がいきなり何かを消しにいきます。 これが一番危険です。

理由は3つあります。第一に、容量が足りないとは限りません(後述する inode 枯渇では、df -h に空きが出ているのに同じエラーが出ます)。第二に、消しても空きが戻らない場合があります(プロセスがファイルを掴んでいるとき)。第三に、消してはいけないものを消すと戻りません。

だからこの記事は、「消さずに空きを作る手」から始めます。 そして、そもそも足りないならディスクを足せばいい——仮想マシンなら、それが数分でできます。

ディスク操作は、間違えると戻せません。 ファイルは消せば済みますが、パーティションを切り直したら中身は返ってきません。 この記事では、既存のディスクには一切触りません。 新しい仮想ディスクを足して、その中だけで作業します。 そして始める前に必ずスナップショットを取ります。 取らずに進まないでください。

対象レベル: 中級〜上級 / 区分: 発展

目次

この記事でわかること

  • No space left on device は容量不足とは限らないこと。df -h に空きがあるのに出るケース(inode 枯渇)があること
  • 消したのに df の数字が減らないのは異常ではないこと。プロセスが掴んでいる間、中身は生き続ける
  • fstab はデバイス名(/dev/sdb1)で書いてはいけないこと。ディスクを足すと名前が入れ替わるから
  • fstab を1行間違えるとサーバーが起動しなくなること。それを防ぐのが mount -a という型であること
  • LVM を使うと、マウントしたまま・止めずにディスクを広げられること。普通のパーティションではこれができないこと
  • マウントすると、その場所に元々あったファイルは消えるのではなく隠れること

この記事でやること

  1. 先にスナップショットを取り、df -h → df -i → du の順で「どこが埋まっているか」を特定する
  2. 消したのに空かない状態をわざと作り、lsof +L1 で犯人を突き止める
  3. VMware で仮想ディスクを1本足し、パーティション作成 → mkfs.ext4 → マウント → UUID で fstab まで通す
  4. さらに2本足して、LVM でマウントしたまま拡張する(vgextend → lvextend → resize2fs)
  5. swap をファイルで作り、--bind でマウントの仕組みを確かめて、正しい順番で後片づけする

先に知る言葉

この記事で初めて出てくる言葉です。 基本的な言葉は用語集にもまとめてあります。

言葉意味
ブロックデバイスディスクそのものを表す入口。/dev/sda、/dev/sdb のような名前で見える
パーティション1本のディスクを区切った区画。/dev/sdb1 の末尾の数字が区画の番号
ファイルシステム区画の中に作る「ファイルの並べ方の規則」。作る作業をフォーマットと呼ぶ
マウントファイルシステムを、/ から始まる木のどこかの枝として繋ぐこと。繋がないと中身は見えない
マウントポイント繋ぎ先のディレクトリ。/mnt/data のような、ただの空のディレクトリでよい
UUIDフォーマットしたときにファイルシステムに焼き付く、世界で重複しない長い識別子。ディスクを挿し替えても変わらない
fstab起動時に「どれを・どこに・どう繋ぐか」を書いておく設定ファイル。/etc/fstab
inodeファイル1個ごとの管理票。個数の上限がフォーマット時に決まる。詳しくはファイル操作の回
LVMディスクを直接使わず、間に1枚はさんで柔軟に切り分ける仕組み。Logical Volume Manager
swapメモリが足りないときに、ディスクをメモリの代わりに一時利用する領域

0. 始める前に: スナップショットを取る

この手順を飛ばさないでください。 この記事で唯一、飛ばすと取り返しがつかない箇所です。

VMをシャットダウンします。

bash
$ sudo poweroff

Windows 側の VMware Workstation で、対象のVMを選び、VM → スナップショット → スナップショットの取得。名前は ディスク練習まえ としてください。

戻したくなったら VM → スナップショット → ディスク練習まえ → 移動 です。詳しくは本線のUbuntu Server を立てた回に書きました。

[スクリーンショット: 01_スナップショット.png] ディスク練習まえ という名前でスナップショットを取った、スナップショットマネージャーの画面を撮ってください。

確認: スナップショットマネージャーに ディスク練習まえ が並んでいれば、ここまでは何をしても戻せます。

1. どこが埋まっているのか(消す前にやること)

VMを起動してログインし直します。ここからは Linux の中です。

1-1. df -h — 容量を見る

bash
$ df -h

出力例

Filesystem                        Size  Used Avail Use% Mounted on
tmpfs                             393M  1.1M  392M   1% /run
/dev/mapper/ubuntu--vg-ubuntu--lv  19G   17G  1.1G  95% /
tmpfs                             2.0G     0  2.0G   0% /dev/shm
/dev/sda2                         2.0G  130M  1.7G   8% /boot

読み方はこうです。

  • -h は human readable。 付けないとバイト数の生の数字が出て読めません
  • 見るのは Use% ではなく Mounted on と組です。95% なのが / なのか /boot なのかで、やることが全然違います
  • /boot だけが 100% になるのは非常によくある事故です。古いカーネルが溜まっただけで、/ には余裕があります

Filesystem の欄が /dev/mapper/ubuntu--vg-ubuntu--lv になっていることに気付いたでしょうか。 /dev/sda1 のような素直な名前ではありません。Ubuntu Server は既定で LVM を使ってインストールされるからです。 これが何なのかは、この記事の後半で自分の手で作ります。

特定の場所だけ見たいときは、パスを渡します。

bash
$ df -h /
$ df -h /var/log

パスを渡すと「そのパスが属しているファイルシステム」が出ます。 /var/log に別のディスクが割り当てられていなければ、/ と同じ行が返ります。これで「その場所は本当に別ディスクなのか」が分かります。

1-2. df -i — 容量が空いているのに書けないとき

ここが最初の山です。 df -h に空きがあるのに No space left on device が出るなら、inode が尽きています。

bash
$ df -i

出力例

Filesystem                        Inodes  IUsed   IFree IUse% Mounted on
/dev/mapper/ubuntu--vg-ubuntu--lv 1245184 132900 1112284   11% /

Inodes はファイル数の上限です。 ファイル1個につき1個消費され、中身が0バイトでも1個使います。 そしてこの上限はフォーマットしたときに決まり、あとから増やせません。

小さいファイルを何十万個も作るシステム(メールの保存、セッションファイル、キャッシュ)で、実際にこうなります。

実際に起こしてみます。 小さなファイルを作って、その中だけで再現します。ホームディレクトリの外には出ません。

bash
$ cd ~
$ dd if=/dev/zero of=tiny.img bs=1M count=20
$ mkfs.ext4 -N 128 -F tiny.img

-N 128 が「inode を 128 個だけ作る」指定です(実際の数は環境で丸められます。 次の df -i で本当の数を見ます)。作ったファイルを、ファイルシステムとしてマウントします。

bash
$ sudo mkdir -p /mnt/tiny
$ sudo mount -o loop ~/tiny.img /mnt/tiny
$ df -h /mnt/tiny
$ df -i /mnt/tiny

確認: df -h は 20MB 弱のうちほとんど空き、df -i は Inodes が3桁の小さい数字になっているはずです。

ここに、中身のないファイルを大量に作ります。

bash
$ cd /mnt/tiny
$ sudo bash -c 'for i in $(seq 1 500); do touch f$i; done'

出力例

touch: cannot touch 'f117': No space left on device
touch: cannot touch 'f118': No space left on device
bash
$ df -h /mnt/tiny
$ df -i /mnt/tiny

確認: df -h は「空きがある」と言っているのに、df -i は IUse% が 100% になっています。 これが inode 枯渇です。容量を空けても直りません。ファイルの個数を減らすしかありません。

[スクリーンショット: 02_inode枯渇.png] df -h /mnt/tiny と df -i /mnt/tiny を続けて実行し、容量は空いているのに IUse% が 100% になっている画面を撮ってください。

片づけます。

bash
$ cd ~
$ sudo umount /mnt/tiny
$ sudo rmdir /mnt/tiny
$ rm ~/tiny.img

なぜ -h と -i を両方見るのか。 df -h だけを見て「空きがあるからディスクの問題ではない」と判断すると、原因にたどり着けません。 No space left on device を見たら、df -h と df -i はセットで打つと決めておいてください。

1-3. du — 犯人のディレクトリを探す

df は「どのファイルシステムが埋まっているか」までしか教えません。中のどこが太っているかは du で探します。

bash
$ sudo du -x -h -d 1 / | sort -h | tail -15

意味はこうです。

オプション意味
-x他のファイルシステムに入り込まない。 これが無いと /proc や別ディスクまで数え始めて答えがずれる
-h読める単位(1.2G など)で出す
-d 11階層だけの合計を出す。いきなり全部出すと画面が流れる
sort -h単位付きの数字として大きさ順に並べる。sort -n だと 900M が 2G より大きく扱われる
tail -15大きいほうから15行

大きかったディレクトリに cd して、同じコマンドを繰り返します。 これを数回やれば犯人に着きます。上から順に絞り込むだけです。

bash
$ sudo du -x -h -d 1 /var | sort -h | tail -10
$ sudo du -x -h -d 1 /var/log | sort -h | tail -10

大きいファイルを直接探すなら find です。

bash
$ sudo find /var -xdev -type f -size +100M -exec ls -lh {} \;

-xdev が du -x と同じ役割(別ディスクへ入り込まない)です。find の組み立て方そのものはfindの回に書きました。

1-4. 消さずに空きを作る3つの手

ユーザーのファイルを消す前に、必ずこの3つを先にやります。 どれも消えて困るものが無い場所です。

① ログ(journal)を縮める

bash
$ journalctl --disk-usage
$ sudo journalctl --vacuum-size=200M
$ journalctl --disk-usage

--vacuum-size=200M は「合計 200MB になるまで古いものから捨てる」指定です。日数で切るなら --vacuum-time=7d。現在のログは消えません。 journal そのものについてはsystemdの回に書きました。

② ダウンロード済みのパッケージを捨てる

bash
$ du -sh /var/cache/apt
$ sudo apt clean
$ du -sh /var/cache/apt

apt はインストール時に落とした .deb を残しています。もう一度必要になれば落とし直せるだけなので、消して困りません。apt clean は全部、apt autoclean は古い版だけです。

③ 古いカーネルを外す

/boot が 100% ならこれです。まず、いま動いているカーネルを確認します。

bash
$ uname -r
$ dpkg --list | grep linux-image

uname -r に出た版だけは絶対に消さないでください。 消すと起動しなくなります。手で選ばず、これに任せます。

bash
$ sudo apt autoremove --purge

autoremove は「いま動いているカーネルと、直前の1つ」を残して外します。 手で apt remove linux-image-... と打つより安全です。

1-5. df と du が食い違う(消したのに減らない)

ここが2つ目の山です。 大きなログを消したのに df の数字が1バイトも減らない。これは壊れているのではありません。

なぜ起きるのか。 ファイルを消すというのは、ファイル操作の回で見たとおり「名前を外す」だけです。まだ開いているプロセスが1つでもあれば、中身は生き続けます。 du は名前をたどって数えるので0になり、df は実際の使用量を見るので減りません。

再現します。 ホームディレクトリの中だけで完結します。

bash
$ sudo apt install -y lsof
$ cd ~
$ df -h ~ | tail -1
$ dd if=/dev/zero of=big.bin bs=1M count=500
$ df -h ~ | tail -1

確認: Avail が 500MB ほど減っていれば成功です。

このファイルを開いたままにするプロセスを作ります。

bash
$ tail -f big.bin > /dev/null &

& はバックグラウンド実行です。[1] 3412 のような番号が返ります。この状態でファイルを消します。

bash
$ rm big.bin
$ ls -l big.bin
$ du -sh ~
$ df -h ~ | tail -1

出力例

ls: cannot access 'big.bin': No such file or directory
20M     /home/user
/dev/mapper/ubuntu--vg-ubuntu--lv  19G   17G  1.1G  95% /

ls にも du にも出てこないのに、df の空きは戻っていません。 これが「消したのに減らない」の正体です。

犯人を出します。

bash
$ sudo lsof +L1

出力例

COMMAND  PID USER   FD   TYPE DEVICE SIZE/OFF NLINK  NODE NAME
tail    3412 user    3r   REG  253,0 524288000     0 27184 /home/user/big.bin (deleted)

+L1 は「リンク数が1未満のものだけ出せ」という指定です。リンク数0=名前が1つも残っていないのに開かれているファイル、つまりこの状況そのものを狙い撃ちします。NLINK が 0、末尾に (deleted) と出ているのが目印です。

直し方は、消すことではなく掴んでいるプロセスを終わらせることです。

bash
$ kill 3412
$ df -h ~ | tail -1

確認: PID は lsof の PID 欄の数字に読み替えてください。終わらせた瞬間に df の空きが戻ります。

[スクリーンショット: 03_lsofで消えないファイル.png] rm した後に du は減っているのに df が減らず、sudo lsof +L1 に (deleted) が出ている画面を撮ってください。

実務で一番多いのは、ログファイルを rm したケースです。 アプリはログを開いたまま動き続けているので、消しても容量は戻りません。サービスを再起動すると戻ります。 だから、動いているサービスのログは rm ではなく truncate -s 0 ファイル名 で中身だけ空にします。

2. VMware で仮想ディスクを1本足す

ここからは足す話です。Windows 側の VMware Workstation で操作します。

先にVMをシャットダウンします(Linux 側で)。

bash
$ sudo poweroff

VMware Workstation で、対象のVMを選んで次の順にたどります。

  1. VM → 設定(Settings)
  2. 左下の 追加(Add) → ハードディスク → 次へ
  3. ディスクの種類は 既定のまま(SCSI が推奨表示されているはず)→ 次へ
  4. 仮想ディスクの新規作成 → 次へ
  5. 最大サイズを 2 GB と入力
  6. 仮想ディスクを単一ファイルとして格納 を選ぶ → 次へ → 完了

同じ手順をもう2回繰り返して、合計3本(2GB を3本)足してください。3本目までこの記事で使います。

[スクリーンショット: 04_ディスク追加.png] VMの設定画面に ハードディスク 2 ハードディスク 3 ハードディスク 4 が並んだ状態を撮ってください。

なぜ最大サイズが2GBでいいのか。 仮想ディスクは、指定したサイズを最初から使うわけではありません(単一ファイルとして格納 でも、中身は使った分だけ増えます)。 ただし練習に2GBもあれば十分で、片づけるときも軽いので小さくしています。

VMを起動してログインします。ここからまた Linux の中です。

3. 足したディスクを使えるようにする

3-1. 認識されているか見る

bash
$ lsblk

出力例

NAME                      MAJ:MIN RM  SIZE RO TYPE MOUNTPOINTS
sda                         8:0    0   25G  0 disk
├─sda1                      8:1    0    1M  0 part
├─sda2                      8:2    0    2G  0 part /boot
└─sda3                      8:3    0   23G  0 part
  └─ubuntu--vg-ubuntu--lv 253:0    0   19G  0 lvm  /
sdb                         8:16   0    2G  0 disk
sdc                         8:32   0    2G  0 disk
sdd                         8:48   0    2G  0 disk

読み方です。

  • sda が元からあるディスク。 sdb sdc sdd が今日足した3本です
  • TYPE が disk はディスクそのもの、part は区画、lvm は LVM の論理ボリューム
  • MOUNTPOINTS が空欄=まだ木に繋がっていない。 だから ls しても見えません
  • sdb の下に何もぶら下がっていないのは、区画もファイルシステムも無い「まっさらな鉄板」だからです

ここから先、コマンドに書くデバイス名を必ず自分の目で確かめてください。 この記事では sdb sdc sdd を使いますが、sda は絶対に触りません。 sda は元からあるディスクで、区画を切った瞬間にシステムが消えます。 SIZE が 2G で MOUNTPOINTS が空であることを、打つ直前にもう一度 lsblk で確認する。これを型にしてください。

3-2. パーティションを切る

parted を使います。--script を付けると対話画面に入らず、1行で完結します。

bash
$ sudo parted /dev/sdb --script mklabel gpt
$ sudo parted /dev/sdb --script mkpart primary ext4 1MiB 100%
$ lsblk /dev/sdb

やっていることは2つです。

  • mklabel gpt — ディスクの先頭に「区画の目次」を作ります。gpt は現在の標準で、古い msdos と違い2TBの上限がありません
  • mkpart primary ext4 1MiB 100% — 先頭から最後まで1つの区画にします。1MiB から始めるのは、先頭を目次のために空けるためです。ここの ext4 はラベルにすぎず、まだフォーマットはされていません

確認: lsblk /dev/sdb に └─sdb1 が増えていれば成功です。

parted の代わりに fdisk /dev/sdb でも同じことができます。fdisk は対話式で、g(GPTを作る)→ n(新規区画)→ Enter を数回 → w(書き込み)という流れです。 fdisk は w を打つまでディスクに書きません。 迷ったら q で保存せずに抜けられます。 これは覚えておくと安心です。

3-3. フォーマットする

bash
$ sudo mkfs.ext4 /dev/sdb1

mkfs は make filesystem です。 ここで区画の中に「ファイルの並べ方」が作られ、inode の個数もここで決まります。

mkfs は確認を聞かずに実行されます。 デバイス名を1文字間違えたら、そのディスクの中身は返りません。 Enter を押す前に、コマンドの中の名前をもう一度読んでください。

3-4. マウントする

繋ぎ先のディレクトリを作ります。 中身は空でかまいません。

bash
$ sudo mkdir -p /mnt/data
$ sudo mount /dev/sdb1 /mnt/data
$ df -h /mnt/data

確認: df -h /mnt/data に /dev/sdb1 の行が出れば繋がっています。書けるか試します。

bash
$ sudo touch /mnt/data/hello.txt
$ ls -l /mnt/data

lost+found というディレクトリが最初から入っています。 これは ext4 が自動で作るもので、壊れたファイルの回収場所です。消さないでください。

ただし、いまのマウントは再起動で消えます。 確かめます。

bash
$ sudo umount /mnt/data
$ ls /mnt/data

空になりました。 ファイルが消えたのではなく、枝を外したので見えなくなっただけです。もう一度 mount すれば戻ります。

3-5. UUID を調べて fstab に書く

起動するたびに自動で繋ぐには /etc/fstab に書きます。 ここで絶対にやってはいけないのが、/dev/sdb1 と書くことです。

理由: sdb sdc という名前は、認識された順に付くだけの一時的な名前です。ディスクを1本足す、順番が変わる、起動タイミングがずれる——それだけで sdb だったものが sdc になります。 すると fstab は別のディスクを、そこにマウントしようとします。

だからUUID で書きます。 UUID はフォーマット時にファイルシステム自体へ焼き付くので、挿す場所を変えても付いて回ります。

bash
$ sudo blkid /dev/sdb1

出力例

/dev/sdb1: UUID="9f2c1a44-7b3e-4d55-8a10-6c9e0b12d3f4" BLOCK_SIZE="4096" TYPE="ext4" PARTUUID="..."

この UUID= の中身をコピーします。 手で書き写すと必ず間違えるので、次のコマンドで追記まで自動でやります。

bash
$ echo "UUID=$(sudo blkid -s UUID -o value /dev/sdb1)  /mnt/data  ext4  defaults,nofail  0  2" | sudo tee -a /etc/fstab
$ tail -3 /etc/fstab

blkid -s UUID -o value はUUIDの値だけを返すオプションです。tee -a は追記(-a が無いと上書きになるので、絶対に付けてください)。

6つの欄の意味です。

欄例意味
1UUID=9f2c...何を繋ぐか。デバイス名ではなくUUIDで書く
2/mnt/dataどこに繋ぐか(マウントポイント)
3ext4ファイルシステムの種類
4defaults,nofailオプション。nofail は「見つからなくても起動を止めない」
50dump(古いバックアップ用)。いまは常に 0
62起動時のチェック順。/ は 1、それ以外は 2、チェック不要なら 0

nofail は必ず付けてください。 練習用のディスクを後で外したとき、これが無いとそのディスクが見つからないだけでサーバーが起動しなくなります。 逆に、本当に無いと困る本番のディスクには付けません(黙って欠けたまま起動してしまうため)。

3-6. mount -a で先に検証する(必須の型)

fstab を書いたら、再起動する前に必ずこれを打ちます。

bash
$ sudo umount /mnt/data
$ sudo mount -a
$ df -h /mnt/data

mount -a は「fstab に書いてある全部を、いま繋いでみる」コマンドです。 つまり起動時に起きることの予行演習です。

  • 何も出力されずプロンプトが戻り、df に出る → 成功。再起動しても大丈夫です
  • エラーが出る → その場で fstab を直します。 再起動してはいけません
bash
$ sudo systemctl daemon-reload

fstab を書き換えたら、これも打っておきます。systemd は fstab を読んでマウント用のユニットを内部で作っているので、変更を教える必要があります(systemdの回で見た daemon-reload と同じ理由です)。

[スクリーンショット: 05_fstabとmount-a.png] tail -3 /etc/fstab で追記した行を表示し、sudo mount -a がエラー無しで通り、df -h /mnt/data に出ている画面を撮ってください。

3-7. それでも fstab を壊したときの戻し方

mount -a を飛ばして再起動し、起動しなくなった場合の話です。知っていれば1分、知らないと詰みます。

VMware の画面には、こういう表示で止まります。

You are in emergency mode. After logging in, type "journalctl -xb" to view
system logs, ... Press Enter for maintenance (or press Control-D to continue):
  1. Enter を押して、root のパスワードを入れます。Ubuntu は既定で root のパスワードがロックされているので、設定していなければ Cannot open access to console, the root account is locked. と出てシェルに入れません。その場合は再起動し、GRUB のメニュー(起動直後に Esc、BIOS 起動の VM では Shift を押したまま)で e を押して、linux で始まる行の末尾に init=/bin/bash を足し、Ctrl + X で起動します。パスワード無しで root のシェルが開くので、ここから先の手順がそのまま使えます(最後の reboot だけは効かないので、sync してから reboot -f を使います)。スナップショットがあれば、戻すのが一番早い道です
  2. この時点でファイルシステムは読み取り専用なので、書けるようにします
bash
$ mount -o remount,rw /
  1. 問題の行を消すか、行頭に # を付けて無効化します
bash
$ nano /etc/fstab
  1. 必ず検証してから再起動します
bash
$ mount -a
$ reboot

nofail を付けていれば、そもそもここには落ちません。 練習用の行には nofail を付ける、という一点だけでこの事故はほぼ消えます。 それでも詰んだら、冒頭で取ったスナップショットに戻せます。 そのために取りました。

4. ファイルシステムには種類がある

mkfs.ext4 の ext4 の部分は、選べます。最初のうちは ext4 で困りませんが、実物で出会うものだけ整理しておきます。

種類どういうものかいつ出会うか
ext4Linux の標準。枯れていて壊れにくく、情報が多い。 縮小もできる迷ったらこれ。 Ubuntu の既定
xfs大きなファイル・大容量に強い。拡張はできるが縮小できないRed Hat 系(RHEL / Rocky)の既定。仕事で出会う
btrfsスナップショット・圧縮・複数ディスクをまとめる機能を自前で持つ。その分、仕組みが複雑Synology の NAS、Fedora の既定
tmpfsメモリ上にある。 速いが再起動で消えるdf -h に出ている /run /dev/shm がこれ。すでに使っている
swapファイルシステムではない。メモリが足りないときの避難先後述

df -h にすでに tmpfs が並んでいたことを思い出してください。 「一時ファイルを置く場所が再起動で消える」のは仕様であって、故障ではありません。

種類を確かめるコマンドはこれです。

bash
$ findmnt -t ext4,xfs,btrfs
$ lsblk -f

lsblk -f は lsblk にファイルシステムの種類とUUIDを添えて出してくれます。blkid の代わりにもなります。

5. LVM で、止めずに広げる

ここまでのやり方には、はっきりした限界があります。 /dev/sdb1 は sdb の中に固定されているので、2GBが足りなくなったら、それ以上は広げられません。 別のディスクを足しても、それは別のマウントポイントになるだけです。

LVM は、ディスクとファイルシステムの間に1枚はさみます。

物理ディスク      →  PV(物理ボリューム)   sdc, sdd
    ↓ まとめる
                     VG(ボリュームグループ)  labvg  ← ここが「容量の池」
    ↓ 切り出す
                     LV(論理ボリューム)      labdata
    ↓ フォーマットしてマウント
                     /mnt/lab

池(VG)にディスクを足せるので、上に乗っている LV を後から広げられます。 これが普通のパーティションとの決定的な違いです。

5-1. まず sdc だけで作る

bash
$ sudo apt install -y lvm2

Ubuntu Server は既定で LVM を使っているので、たいてい既に入っています。「最新です」と出れば問題ありません。

bash
$ sudo pvcreate /dev/sdc
$ sudo vgcreate labvg /dev/sdc
$ sudo vgs

出力例

  VG    #PV #LV #SN Attr   VSize  VFree
  labvg   1   0   0 wz--n- <2.00g <2.00g
  • pvcreate — このディスクを LVM の部品として使う印を付けます。パーティションを切らずにディスクごと使えます
  • vgcreate labvg /dev/sdc — labvg という名前の池を作り、sdc を注ぎます
  • vgs — 池の一覧。VSize が全体、VFree が空き

池から1GBだけ切り出します。

bash
$ sudo lvcreate -L 1G -n labdata labvg
$ sudo lvs
$ sudo mkfs.ext4 /dev/labvg/labdata
$ sudo mkdir -p /mnt/lab
$ sudo mount /dev/labvg/labdata /mnt/lab
$ df -h /mnt/lab

確認: df -h /mnt/lab が 1.0G 前後になっていれば成功です。

中身を置いて、さらに「使用中」にします。 広げている最中も本当に止まらないことを確かめるためです。

bash
$ sudo dd if=/dev/zero of=/mnt/lab/keep.bin bs=1M count=200
$ sudo tail -f /mnt/lab/keep.bin > /dev/null &
$ df -h /mnt/lab

この tail が動いている=ファイルを開いたまま=アンマウントできない状態です。実際にできないことを確認しておきます。

bash
$ sudo umount /mnt/lab

出力例

umount: /mnt/lab: target is busy.

この状態のまま広げます。

5-2. sdd を足して広げる

bash
$ sudo pvcreate /dev/sdd
$ sudo vgextend labvg /dev/sdd
$ sudo vgs

確認: #PV が 2 に、VSize が 4G 前後に増えていれば、池が広がりました。ここまではまだ /mnt/lab に変化はありません。

LV を広げ、ファイルシステムを追従させます。

bash
$ sudo lvextend -l +100%FREE /dev/labvg/labdata
$ df -h /mnt/lab

df はまだ 1.0G のままです。 ここが一番の勘所です。

LV(器)を広げても、ファイルシステム(中の並べ方)は自分が広くなったことを知りません。 教えるのが resize2fs です。

bash
$ sudo resize2fs /dev/labvg/labdata
$ df -h /mnt/lab
$ ls -l /mnt/lab

出力例

Filesystem                 Size  Used Avail Use% Mounted on
/dev/mapper/labvg-labdata  3.9G  205M  3.5G   6% /mnt/lab

確認: アンマウントしていないのに容量が増えています。 そして keep.bin は無事で、tail も動いたままです。

[スクリーンショット: 06_lvextend前後.png] lvextend の直後(df が 1.0G のまま)と resize2fs の直後(3.9G に増えた)を並べて撮ってください。

resize2fs は ext4 用の名前です。 xfs では xfs_growfs /mnt/lab を使います。 そしてxfs は広げられても縮められません。 「あとで縮めるかもしれない」なら ext4 を選びます。 -l +100%FREE は「池の空きを全部」の意味。-L +1G と書けば1GBだけ足せます。-l(小文字エル)と -L は別物なので注意してください。

バックグラウンドの tail を止めておきます。

bash
$ jobs
$ kill %1

6. swap — メモリ不足の応急処置

swap は「メモリが足りなくなったとき、ディスクを一時的にメモリの代わりに使う」領域です。 いまの状態を見ます。

bash
$ swapon --show
$ free -h

swapon --show が何も出力しないなら、swap がありません(クラウドのVMではよくあります)。free -h の Swap: 行が全部0でも同じです。

パーティションを切らなくても、ファイルで作れます。

bash
$ sudo fallocate -l 1G /swapfile
$ sudo chmod 600 /swapfile
$ sudo mkswap /swapfile
$ sudo swapon /swapfile
$ swapon --show
$ free -h
  • fallocate -l 1G — 1GBの領域をまとめて確保します
  • chmod 600 — 所有者だけが読み書きできる状態。これを飛ばすと swapon が警告を出します。 メモリの中身が載る場所なので、他人に読ませてはいけません(権限の読み方は本線の権限の回にあります)
  • mkswap — swap として使う形式に整えます
  • swapon — 有効化します

確認: swapon --show に /swapfile の行が出て、free -h の Swap: が 1.0Gi になれば成功です。

再起動後も使うなら fstab に書きます。

bash
$ echo "/swapfile none swap sw 0 0" | sudo tee -a /etc/fstab
$ sudo swapoff /swapfile
$ sudo swapon -a
$ swapon --show

swap はメモリ不足の根本解決ではありません。 ディスクはメモリより桁違いに遅いので、swap を使い始めたシステムは動いてはいるが、ひどく遅い状態になります。落ちない代わりに、遅くて使えません。 swap が常時使われているなら、増やすべきはメモリです。 swap は「たまに起きる山を越えさせる」ためのものだと考えてください。 なお、free -h の available を見ます。 free(完全な空き)が少ないのは異常ではありません。Linux は空きメモリをキャッシュに使うのが正常で、必要になれば返します。

外すのは簡単です。

bash
$ sudo swapoff /swapfile
$ sudo rm /swapfile

swapoff は、swap に載っていた中身をメモリに戻します。 メモリが逼迫しているときは失敗することがあります。

7. マウントの仕組みを、2つの実験で確かめる

7-1. 同じ中身を2か所に見せる(--bind)

コピーではなく、同じものを別の場所からも見えるようにできます。

bash
$ sudo mkdir -p /mnt/bind-test
$ sudo mount --bind /mnt/data /mnt/bind-test
$ ls /mnt/bind-test
$ sudo touch /mnt/bind-test/from-bind.txt
$ ls /mnt/data

確認: /mnt/bind-test に作ったファイルが /mnt/data にも出ます。コピーされたのではなく、同じ場所を2つの入口から見ているだけです。容量は増えません。

bash
$ df -h /mnt/data /mnt/bind-test

両方が同じ /dev/sdb1 の行を返します。

シンボリックリンクとは別物です。 シンボリックリンクは「道案内が書かれた別のファイル」なので、リンクだと分かる形で見えます。 --bind は本当にそこにマウントされているので、中に入ったプログラムからは区別が付きません。閉じ込められた環境(chroot やコンテナ)に、外のディレクトリを見せるときに使います。

bash
$ sudo umount /mnt/bind-test
$ sudo rmdir /mnt/bind-test

7-2. マウントすると、元の中身は隠れる(事故のもと)

これは知らないと必ず一度は焦ります。

bash
$ sudo mkdir -p /mnt/hide
$ sudo touch /mnt/hide/important.txt
$ ls /mnt/hide

このディレクトリに、別のファイルシステムをかぶせます。

bash
$ sudo mount /dev/labvg/labdata /mnt/hide
$ ls /mnt/hide

important.txt が消えました。 正確には、消えたのではなく、上にかぶさったファイルシステムに覆い隠されています。

bash
$ sudo umount /mnt/hide
$ ls /mnt/hide

戻ってきました。

これが実務でどう事故るか。 既にデータが入っているディレクトリに新しいディスクをマウントすると、元のデータは「消えたように見えて」書き込みは新しいディスクへ行きます。 そしてアンマウントした瞬間、書いたはずのデータが全部消えたように見えます(新しいディスク側に残っています)。 マウントポイントは、空のディレクトリを新しく作る。 これを守れば起きません。

bash
$ sudo rmdir /mnt/hide

つまずいたところ

df -h を見て「空きがあるからディスクじゃない」と切り分けを打ち切った。 アプリのエラーログをずっと読んでいましたが、原因は inode でした。df -h と df -i はセットで打つと決めるまで、この間違いを2回やっています。

du の合計が df と合わないので、コマンドを間違えたと思った。 合わない理由は2つあって、-x を付けずに別のファイルシステムまで数えていたのと、消したのに掴まれているファイルでした。「合わない」こと自体が情報だと分かるまで、片方の数字を疑い続けていました。

fstab にデバイス名で書いて、ディスクを足した次の起動で emergency mode に落ちた。 sdb に書いたのに、追加したディスクが先に認識されて sdc にずれていました。UUID で書けば起きなかった話で、nofail も付けていませんでした。このとき、スナップショットに救われました。

lvextend したのに df が増えず、コマンドが失敗したと思って何度も打ち直した。 器を広げただけで、中のファイルシステムに伝えていなかっただけです。lvextend と resize2fs は必ず2つで1組、と覚え直しました。

umount で target is busy が出て、原因が分からなかった。 自分がそのディレクトリに cd していたのが原因でした。cd ~ で出れば外れます。それでも駄目なら sudo lsof +D /mnt/data で、誰が中にいるかを見ます。

mkfs を打つ前の確認を、面倒だと思っていた。 実際に sdb と打つつもりで sda を打ちかけて手が止まったことがあります。確認の手間は、消えたシステムの復旧より圧倒的に安いです。

後片づけ

順番が重要です。逆にやると起動しなくなります。

理由: fstab に行が残ったままディスクを外すと、起動時に「書いてあるのに無い」状態になります。nofail を付けていれば通り過ぎますが、付いていなければ emergency mode に落ちます。 だから設定を先に消し、次に外し、最後にディスクを抜きます。

① fstab から消す

bash
$ sudo nano /etc/fstab

この記事で追記した行(/mnt/data の行と /swapfile の行)を削除します。Ctrl+O → Enter で保存、Ctrl+X で終了です。

bash
$ tail -5 /etc/fstab
$ sudo mount -a
$ sudo systemctl daemon-reload

確認: mount -a がエラー無しで通ること。 ここで通らないなら、まだ再起動してはいけません。

② アンマウントする

bash
$ sudo swapoff /swapfile 2>/dev/null
$ sudo rm -f /swapfile
$ cd ~
$ sudo umount /mnt/lab
$ sudo umount /mnt/data
$ lsblk

確認: lsblk の MOUNTPOINTS から /mnt/lab と /mnt/data が消えていること。target is busy が出たら、まだそこに cd しています。

③ LVM を解体する

bash
$ sudo lvremove -y /dev/labvg/labdata
$ sudo vgremove -y labvg
$ sudo pvremove -y /dev/sdc /dev/sdd
$ sudo vgs

確認: vgs に labvg が出なくなり、元からある ubuntu-vg だけが残っていること。ubuntu-vg は絶対に消さないでください。

④ 空のディレクトリを消す

bash
$ sudo rmdir /mnt/data /mnt/lab
$ ls /mnt

⑤ VMを止めて、VMware でディスクを外す

bash
$ sudo poweroff

VMware Workstation で VM → 設定 → ハードディスク 2(3、4)を選び、削除。3本とも外したら、VMを起動して確認します。

bash
$ lsblk
$ df -h

確認: sdb sdc sdd が消え、問題なく起動してログインできること。 ここまで来れば片づけ完了です。

どこかで詰まったら、冒頭のスナップショット ディスク練習まえ に戻してください。 片づけの手順を追うより確実で、速いです。

まとめ

  • No space left on device を見たら、df -h と df -i を必ず両方打つ。 容量ではなくinode 枯渇のことがある
  • inode の数はフォーマット時に決まり、後から増やせない。 小さいファイルを大量に作るシステムでは、容量より先に尽きる
  • 犯人探しは du -x -h -d 1 を上から順に。 -x が無いと別ディスクまで数えて答えがずれる
  • 消す前に、消さずに空ける手が3つある。 journalctl --vacuum-size / apt clean / apt autoremove --purge(古いカーネル)
  • df と du の食い違いは異常ではない。 プロセスが掴んでいる間、消しても中身は生きている。 lsof +L1 で (deleted) を探し、プロセスを終わらせる
  • 動いているサービスのログは rm しない。 truncate -s 0 で中身だけ空にする
  • ディスクを使うには4段階。 区画を切る(parted)→ フォーマット(mkfs.ext4)→ 繋ぎ先を作る(mkdir)→ 繋ぐ(mount)
  • fstab にデバイス名を書かない。 sdb sdc は認識順に付くだけの一時的な名前で、入れ替わる。blkid で UUID を取って書く
  • fstab を書いたら、再起動の前に必ず mount -a。 これが起動時の予行演習になる。練習用の行には nofail
  • 壊したら emergency mode で mount -o remount,rw / → fstab を直す → mount -a → reboot(root がロックされていて入れなければ、GRUB で init=/bin/bash)
  • ファイルシステムは用途で選ぶ。 迷ったら ext4。xfs は広げられるが縮められない。tmpfs はメモリ上なので再起動で消える
  • LVM は「容量の池」を作る仕組み。 vgextend で池を広げ、lvextend で器を広げ、resize2fs で中身に伝える。この3つで1組
  • LVM ならアンマウントせずに広げられる。 普通のパーティションではできない。これが LVM を使う理由
  • swap はメモリ不足の応急処置であって、解決ではない。 常時使われているなら、増やすのはメモリのほう
  • --bind は同じ中身を2か所に見せる。 コピーではないので容量は増えない
  • マウントすると、元の中身は消えるのではなく隠れる。 マウントポイントには、新しく作った空のディレクトリを使う
  • 片づけは「fstab から消す → アンマウント → ディスクを外す」の順。 逆にやると起動しなくなる
  • そして、始める前にスナップショット。 ディスク操作でこれを飛ばしていい場面はない

借りた VPS では、手元の VMware のように仮想ディスクを足したり外したりを自由には繰り返せません。たとえばシンVPSはストレージ増設オプションを後から解約できない(2026-11 時点)ので、借りたサーバーで同じ手順を試すなら、増設の前に df -h と df -i で本当に容量が足りないのかを確かめてからにしてください。

参考リンク


次に読む

この記事は 【深掘り】Linux の 8 / 18 本目です。

記事
← 前の記事systemdのユニットファイル — Afterは依存関係ではない
→ 次の記事RAIDと世代バックアップの違い — 冗長化では守れないもの

上から順に読めば積み上がるように並べています。 飛ばしても構いませんが、詰まったら前の回に戻ってください。

全体の順路は はじめに にあります。

roadmap.sh のどこをやっているか

DevOps›Linux — Disks & Filesystems
  • パーティション・mkfs・マウント・fstab
  • LVM で広げる / swap / inode

この記事は、上の項目を実際に手を動かして確かめる回です。

よかったらシェアしてね!
  • URLをコピーしました!
  • URLをコピーしました!

コメント

コメントする

目次