障害・アンチパターン図鑑 · 基礎から応用へ

ファイル記述子枯渇:開ける数の上限に達する

ファイルとソケットに共通する記述子を、上限と解放の両面から調べます。

この記事をロゲイアに質問する確認問題3問に進むこれまでの誤答を復習する

更新日

この記事の目次
  1. ファイル以外も記述子を使う
  2. EMFILEとENFILEを区別する
  3. 上限を増やす前に数を分解する
  4. 検証では失敗経路も繰り返す
  5. この記事をロゲイアに質問する理解を確かめる

ファイル以外も記述子を使う

Linuxのファイル記述子は、開いたファイルだけでなく、ソケット、パイプなどの操作にも使います。Webサーバーで新しい接続を受けられなくなった原因が、通常のファイルを大量に読む処理とは限りません。保持中の接続も数える必要があります。

プロセスには開ける記述子数の制限があり、システム全体にも資源上の制約があります。どの上限に達したかで調べる範囲が変わるため、「Too many open files」という表示だけで一律に同じ設定を変えないようにします。

EMFILEとENFILEを区別する

EMFILEはプロセス側の記述子上限との関係を、ENFILEはシステム全体の開いたファイルの制限との関係を調べる手掛かりです。実際のエラーを記録し、対象プロセスの/proc/PID/fdや制限情報と照合します。

例えばリクエストごとにソケットを作り、例外時だけ閉じ忘れる処理では、正常系の試験だけでは見えない増加が起こります。成功時と失敗時の両方で、所有者が確実に解放する経路を確認します。

上限を増やす前に数を分解する

必要な接続数、ログファイル、監視用の記述子などを分類し、正常な利用量と解放漏れを分けます。上限を上げることが容量計画として適切な場合もありますが、漏れが続けば到達する時刻を遅らせるだけになる可能性があります。

接続プールにも最大数と破棄の方針が必要です。再利用すれば作成回数を減らせますが、無制限に接続をためる設計では上限管理になりません。負荷に対して開いている数がどのように変わるかを時系列で見ます。

検証では失敗経路も繰り返す

修正後は、成功する処理だけでなく、接続失敗、タイムアウト、キャンセルを繰り返します。各回の終了後に記述子数が基準へ戻るか、適切なプール上限で安定するかを確認します。プロセスを再起動して数が減っただけでは解放の修正を確認できません。

他プロセスの記述子を調べるには権限が必要なことがあります。観測のために無条件に管理権限を与えるのではなく、対象と目的を限定します。記述子一覧にはパスなどの情報も含まれるため、そのまま公開しないようにします。

読了と問題の結果を、言語ごとにこのブラウザへ保存します。

コースの順番に沿って学ぶ

サーバーの中で起きていること · STEP 14

学習コースから次を選ぶ