システム・プロトコル図鑑 · 基礎から応用へ

PostgreSQLの共有バッファ:ページを読み、汚れたページを書き戻す

バッファヒット、dirtyページ、WALの順序を追い、共有バッファの大きさだけで性能を決めない考え方を学びます。

この記事をロゲイアに質問する確認問題3問に進むこれまでの誤答を復習する

更新日

この記事の目次
  1. 共有されるのはテーブルのページ
  2. ヒットと読み込みを分ける
  3. 変更したページとログの先行
  4. 測定してから容量を変える
  5. この記事をロゲイアに質問する理解を確かめる

共有されるのはテーブルのページ

PostgreSQLのshared_buffersは、テーブルや索引などのページを複数のサーバープロセスで共有して保持する領域です。通常のブロックサイズが8KiBなら、1GiBの領域に入るページ数の単純な目安は131072です。ただし実際のサーバーメモリはそれだけではなく、接続、処理中のソートやハッシュ、管理情報、OSにも必要です。shared_buffersを増やすと総メモリ使用量の全問題が解決するという関係ではありません。ページを共有する仕組みと、各クエリの作業用メモリを分けます。

ヒットと読み込みを分ける

必要なページが共有バッファにあれば、そこで読み取りを進められます。なければファイルから読み込みますが、その読込みが必ず物理装置まで届くとは限りません。OSのページキャッシュが応答する場合もあります。したがって共有バッファのhit率だけからSSDのI/O回数を確定することはできません。例えば大きな逐次走査で多くのページを一度だけ読む処理と、小さな索引を繰り返し読む処理では、同じメモリ量でも有効な再利用の仕方が異なります。

変更したページとログの先行

ページを更新すると、そのページはdirtyになります。更新されたページを最終位置へ書く前に、回復に必要なWALが適切に永続化されている必要があります。コミット時に関連する全データページを書き戻す方式とは違うので、コミット済みの変更がしばらく共有バッファ上にあること自体は矛盾ではありません。バックグラウンドライター、チェックポイント、要求元の処理などが書き戻しに関わります。dirtyの量、書き戻す速さ、WALの生成量を合わせて見ないと、待ちの原因を取り違えます。

測定してから容量を変える

公式文書が示す割合は出発点であり、すべてのサーバーの最適値ではありません。データの作業集合、同時実行数、OSキャッシュ、チェックポイント設定などで適切な量は変わります。増量によって他のメモリが圧迫されれば、期待とは逆に全体が遅くなることもあります。変更前後で同じ問い合わせ、同じデータ、同じキャッシュ条件を比較し、CPU、I/O、待機の観測を併用します。バッファヒットは役立つ手掛かりですが、クエリの意味や索引設計の良否まで保証する指標ではありません。

読了と問題の結果を、言語ごとにこのブラウザへ保存します。

コースの順番に沿って学ぶ

サーバーの中で起きていること · STEP 13

学習コースから次を選ぶ