データベースのシステムの監視 ～監視の概要～
富士通株式会社 ソフトウェアプロダクト事業本部 データマネジメント事業部
データベースシステムの異常や停止は業務の停止につながるため、あらかじめ、異常が発生したときの対策や、未然防止策を立てておく必要があります。これらの対策を行ううえで、「データベースシステムの監視」はとても重要です。データベースシステムが安定稼動している状態を知り、その状態が維持されていることを監視し、異常時の対策を十分に行っておくことで、異常が発生した場合には迅速に対処することができます。また、データベースシステムの情報を定期的に収集し、保存しておくことで、異常が発生したときの原因を特定したり、異常の兆候を検知することができます。
ここでは、PostgreSQLのデータベースシステムの監視対象と監視方法の概要について説明します。本資料は、Linuxを前提としています。
1. データベースシステムの監視とは
データベースシステムの監視は、システムを安定稼働させ続けるために必要であり、何に影響を受けるかを把握し、異常を検出した際に適切に対処する必要があります。
データベースシステムに影響を与える要因には、想定外の処理量の増加やデータ量の増加、システム改修時のパラメーターの変更やアプリケーションの処理変更、ディスク異常などのハードウェア故障などがあり、これらによりデータベースの性能が劣化したり、データベースシステムが停止したりする場合があります。
データベースの異常を検出しても、その原因を特定することが難しい場合があります。そのような場合を想定して、各種統計情報やログ（syslog、サーバログ）を定期的に収集・保存し、正常時の基準値を把握しておくことが重要です。そうすることで、異常が発生したときの原因特定に利用できます。また、異常発生の予兆判断にも利用できます。
2．データベースシステムの監視対象
「1. データベースシステムの監視とは」で記載した要因は、それぞれ事象として表れます。ここでは、どのような情報を監視すれば良いかを説明します。
データベースシステムの監視を大きく分類すると、「サーバの監視」と「PostgreSQLの監視」があります。
サーバの監視は、PostgreSQLを稼働させるサーバ自体が正常に稼働しているか、OSのリソースが不足していないか、syslogに異常を知らせるメッセージが出力されていないか、ディスク使用率に問題は無いかなどを確認します。
PostgreSQLの監視は、PostgreSQLのプロセスが起動しているか、SQLの実行が可能か、サーバログに異常を知らせるメッセージが出力されていないか、実行したSQLの性能に遅延が発生していないか、不要領域が増加していないかなどを確認します。
「サーバの監視」および「PostgreSQLの監視」の、主な監視対象を以下に示します。
| 分類 | 監視対象 | |
|---|---|---|
| サーバの監視 | サーバの死活 | サーバOSの応答 |
| OSのリソース | CPU使用率 | |
| メモリ使用率 | ||
| I/Oビジー率 | ||
| ネットワーク帯域使用状況 | ||
| メッセージ | syslog （システム内で行われた処理、ハードウェアからのメッセージ（注）） | |
| ディスクの容量 | 使用率、使用容量、空き容量 | |
| PostgreSQLの監視 | PostgreSQLの死活 | PostgreSQLプロセスの有無 |
| SQL実行可否 （検索や更新が正常に実行できるか確認） | ||
| メッセージ | サーバログ | |
| ディスクの容量 | データベースやインデックスで使用されるディスク容量 | |
| 性能 | 遅いSQLの有無 | |
| 長時間放置されているトランザクションの有無 | ||
| ロック待ち時間の長いSQLの有無 | ||
| レプリケーションの遅延状況 （レプリケーション構成の場合） | ||
| 性能（断片化） | 不要領域 （データの挿入や削除によって発生した空き領域） | |
| インデックスのばらつき （インデックスの並び順とテーブルの並び順が揃っているか） | ||
注） SNMP（Simple Network Management Protocol）によるメッセージをsyslogに出力した場合
3．データベースシステムの監視方法
データベースの監視は、「2. データベースシステムの監視対象」で述べた監視対象を、「どう」監視するのかが、とても重要です。
ここでは、監視方法や監視する頻度などについて説明します。
3.1 監視方法
監視方法は、「死活監視、状態監視」、「メッセージ監視」、「容量監視」、「性能監視」の4つに分類されます。それぞれの監視方法について説明します。
死活監視、状態監視
サーバからの応答があるか、PostgreSQLのプロセスが正常に稼働しているか、SQLの実行が可能かを監視します。稼動状態を監視し、早期に障害検出と対処を行うことで、システムの停止を最小限にすることができます。サーバの死活監視は、OSのpingコマンドを利用します。PostgreSQLの死活監視は、OSのpsコマンドやPostgreSQLのpg_isreadyコマンドを利用します。SQLの実行可否は、「SELECT 1」などのシンプルなクエリを利用します。
また、CPUやメモリなど、OSのリソースの状態についても監視します。リソースの状態を監視することで、障害発生時の早期解決や、異常の兆候をより早く検出できます。OSのリソースの状態監視は、OSのsarコマンドやvmstatコマンドなどを利用します。
メッセージ監視
PostgreSQLは、インフォメーションやエラーメッセージをサーバログに出力しています。システム内で行われた処理やハードウェアからのメッセージはsyslogに出力しています。これらのログを監視することで、エラーを検出することができます。また、エラーが発生した場合は、エラーメッセージからエラー原因の分析を行い、対処することができます。
メッセージには、メッセージレベル（DEBUG[1～5]、INFO、NOTICE、WARNING、ERROR、LOG、FATAL、PANIC）が付加されています。PostgreSQLでエラーが発生した場合は、「ERROR」「FATAL」「PANIC」のいずれかが割り当てられるため、この3つを監視することで、エラーの発生を早期に検出し対処することができます。
なお、PostgreSQLのインフォメーションやエラーメッセージをsyslogに出力すると、「ERROR」は「WARNING」に、「FATAL」は「ERR」に、「PANIC」は「CRIT」に変換されます。そのため、「WARNING」「ERR」「CRIT」を監視します。
容量監視
データベースクラスタ領域（PGDATA）、TABLESPACE領域、アーカイブWAL（Write-Ahead Log）領域のディスク容量が足りなくなると、データベースが更新できなくなったり、PostgreSQLが強制終了したりと運用に大きな支障をきたします。ディスクの使用率や空き容量を監視することで、領域不足の予兆を検知することができます。これにより、容量不足を起こす前にディスクを増設するといった対処をすることができます。
容量の監視は、OSのlsコマンドやduコマンド、PostgreSQLのpg_database_size関数を利用します。また、OSSのpg_statsinfoなどを利用することもできます。
性能監視
遅いSQLはないか、ロック待ち時間の長いSQLはないか、などを監視します。キャッシュヒット率やインデックスの使用率、OSのリソースの状態と併せて監視することで、チューニングポイントを判断することができ、問題に素早く対応できるようになります。チューニングポイントは、システムチューニング（postgresql.confといった設定ファイル、ハードウェアリソースなど）とSQLチューニング（テーブル設計、SQL設計など）に分類できます。また、不要領域やインデックスのばらつきを監視し、対応することで、性能の向上が期待できます。
性能の監視は、PostgreSQLの統計情報ビューやサーバログを利用します。また、OSSのpg_statsinfoやpgBadgerなどを利用することもできます。
3.2 監視間隔、異常とみなす値（閾値）
「2. データベースシステムの監視対象」と「3.1 監視方法」で監視対象と監視方法を決めたあとは、その監視対象を「どのくらいの頻度」で監視するのか決めます。また、監視した結果「どのレベルから異常とみなすのか」を決めます。ここでは、「監視間隔」と「異常とみなす値（閾値）」について説明します。
監視間隔
監視間隔は、SLA（Service Level Agreement）などのシステム要件や、監視による負荷を考慮して決定します。例えば、監視を頻繁に行えば異常を早期に検知することはできますが、取得する情報量が多くなるためディスク容量が圧迫することになります。また、通信が必要な監視の場合は、ネットワーク帯域に影響を与えます。そのため、これらを考慮し、監視する内容・目的に応じた監視間隔を設定してください。
| 監視方法 | 監視間隔 |
|---|---|
| 死活監視、状態監視 | 障害発生時に早期にスタンバイサーバに切り替え、システムの停止時間を最小限にするため、「秒間隔」での監視を行います。 |
| メッセージ監視 | 問題発生時の情報だけでなく、ある程度の期間の情報が必要になるため、「分間隔」での監視を行います。問題が発生した原因の追求や、問題の切り分けができるように、多くの情報を収集・保存するため、秒間隔の監視ではディスク容量を圧迫する可能性があります。 |
| 容量監視 | |
| 性能監視 |
異常とみなす値（閾値）
「異常とみなす値（閾値）」の判断はシステムによって異なるため、安定稼働時の状態、今後のシステムの変動、異常時の対応時間を考慮したうえで、問題と判断すべき値（閾値）を決めてください。例えば、ディスクの空き容量が1%になった時点で異常を検知しても、ディスクを準備している間にシステムが停止してしまうかもしれません。「ディスクの空き容量が20%未満になったらアラームを挙げる」のような余裕を持った設定にしておくことで、運用に影響を与えることなく対応することができます。このように、監視する内容・目的に応じた閾値を設定してください。
3.3 監視ツール
PostgreSQL本体にはデータベースの監視に必要な情報を収集する機能はありますが、「監視」自体をする機能はありません。監視するためには監視用のシェルスクリプトやSQLシェルスクリプトを作成するか、以下に示すような監視ツールを使用します。
異常が検出された場合には、管理者に異常を知らせる仕組みも併せて構築してください。
| OSSの監視ツール | 概要 | 通知機能 |
|---|---|---|
| pg_statsinfo | 統計情報やOSのリソース情報などを時系列で取得・保存します。統計情報の取得機能、簡易レポート出力機能、アラート機能などを備えています。 | 有り |
| pgBadger | ログファイル解析 / 統計レポートを出力します。 | 無し |
| Zabbix | サーバ、ネットワーク、アプリケーションを集中監視します。統合監視に必要な、監視、障害検知、通知機能を備えています。 | 有り |
| pg_monz （テンプレート） | ||
| Hinemos | 複数のコンピュータを単一のコンピュータのイメージで運用管理します。状態監視、ジョブ管理、性能管理、環境構築、収集蓄積を行う機能を備えています。 | 有り |
PostgreSQLのデータベースシステムの監視対象と監視方法の概要について説明しました。データベースシステムを監視することで、異常やその兆候をより早く検出し、対応することができます。これにより、業務システムの停止を防ぎ、可用性の高いシステムを構築することができます。
外部リンク
下記記事も参照ください。更に詳しい解説があります。
- データベースシステムの監視 ～監視方法と監視例～ (PostgreSQLインサイド)
本ページ掲載情報を無断で複製・転載する事を禁止します。