障害・アンチパターン図鑑 · 基礎から応用へ

ディスク枯渇と書き込み失敗

書き込み先の容量・inode・quotaを切り分け、DBの回復履歴を守りながら復旧と再発確認を進めます。

この記事をロゲイアに質問する確認問題3問に進むこれまでの誤答を復習する

更新日

この記事の目次
  1. 空きバイトだけで判断しない
  2. 書き込み先と保持原因を分ける
  3. 削除で回復を壊さない
  4. 容量確保後に成功を確認する
  5. この記事をロゲイアに質問する理解を確かめる

空きバイトだけで判断しない

ディスク枯渇では、ファイルシステムの空き容量だけでなく、inode数、ユーザーやコンテナのquota、書き込み先のマウント、予約領域などを確認します。別のディスクに空きがあっても、データやログの実際の書き込み先が満杯なら失敗します。ファイルを削除したのに容量が戻らない場合は、プロセスが削除済みファイルを開いたまま保持している可能性もあります。エラーメッセージと対象のパスを記録して、どの制約に達したかを分けます。

書き込み先と保持原因を分ける

例えばアプリのログとDBのWALが別ボリュームにある場合、ログ領域の整理でWAL領域の不足が直るとは限りません。PostgreSQLではアーカイブ失敗やレプリケーションスロットの遅れにより、必要なWALが保持される場合があります。増えているファイルを単に「不要」と判断せず、保持されている理由を調べます。容量の時系列と、アーカイブやレプリケーションの状態を合わせれば、一時的な急増か継続的な滞留かを区別する助けになります。

削除で回復を壊さない

復旧のために、DBが管理するWALやデータファイルを手で削除してはいけません。必要な回復履歴や構造を失う危険があります。まず安全に削除できる管理済みログ、失敗した一時出力、容量拡張などを運用手順に従って検討します。削除済みファイルの領域を解放するにはプロセス側の対応が必要なことがあり、再起動の影響も評価します。VACUUM FULLのように追加の作業領域を必要とする処理を、空きがない状態で安易に始めるのも避けます。

容量確保後に成功を確認する

空きを作った後は、ディスク使用量が再び増えていないか、書き込みが成功するか、トランザクションやアーカイブが再開したかを確認します。失敗した要求を再送する前には、アプリがどこまで処理したかを調べ、二重実行に備えます。監視には使用率だけでなく、増加速度、残り時間、inode、保持されたWAL量を含めます。一時的に空きを増やす対処と、無制限に蓄積する原因を直す対処を分けて完了を判断します。

読了と問題の結果を、言語ごとにこのブラウザへ保存します。

コースの順番に沿って学ぶ

サーバーの中で起きていること · STEP 13

学習コースから次を選ぶ