HQbirdサーバーの状態
サーバーの状態を1分で
エージェントは1分ごとに、サーバー、OS、ディスク、Firebird データベースに関するデータを収集します。10分ごとにこのデータをしきい値と比較し、ステータススナップショットを書き込みます。レポートを開けば、何が、いつ壊れたのか、そして何をすべきかがすぐにわかります。
- 1分 サーバーとデータベースのメトリクス
- 10分 ステータススナップショット
- 18 レポート内のシステム
- 24時間 · 7 · 14日 履歴
- 読み取り専用 監視はサーバー上の何も変更しません
シナリオ
管理者の1分間
朝。ユーザーから昨夜はすべてが遅かったと言われます。コーヒーが冷める前に、4つの HQ Monitor 画面が答えを出します。
server_status
データの収集方法
エージェントは Firebird サーバー上で動作し、データがある場所から直接読み取ります。OSカウンター、cgroup と ETW、MON$ 監視テーブル、trace、firebird.log、データベースヘッダー、そして自身のジョブの結果です。別の監視サーバーも、データベース内のエージェントも不要です。
エージェントは10分ごとにすべてをステータススナップショットにまとめます。各チェックには警告と重大の2つのしきい値があります。各検出結果にはキー、テキスト、ヒントがあります。新しい問題は2回連続のスナップショット後に、つまり約20分後に表示されます。OOM やデータベースの破損などの緊急事態は即座に表示されます。スナップショットは他のデータとともに HQ Monitor に送信されます。
- 1収集1分ごと: CPU、メモリ、ディスク、接続、トランザクション
- 2スナップショット10分ごと、10分間の平均とピーク
- 3しきい値警告と重大。エージェント設定で指定
- 4検出何が、どこで見つかったか、ヒント、アクションボタン
- 5✓ レポート24時間、7日、14日間のマトリクス。HQCenter からのメール
エージェント自身の負荷の高いジョブ(バックアップ、スイープ、データベースチェック、ディスクテスト)はチャート上にマークされます。バックアップ中の遅い1分はユーザーの問題としてカウントされません。
CPU · メモリ · プログラム
サーバーとOS
遅いデータベースの原因は、しばしば Firebird ではありません。HQ Monitor はサーバー負荷だけでなく、それを生み出しているのが誰か(Firebird、エージェント自身、あるいは他のプログラムやサービス)も表示します。
| 表示される内容 | 詳細 | デフォルトのしきい値 |
|---|---|---|
| Firebird のバージョンとフォルダー | サーバーリストのバージョン文字列。ダッシュボードのバージョンとインストールフォルダー。 | — |
| CPU とロードアベレージ | 1分ごと。10分間のプログラム別 CPU: Firebird、エージェント、その他、短命なプロセス。 | 80% · 97% |
| メモリ | 使用量、スワップ、メモリプレッシャー(Linux の PSI)。サービス別(Linux)またはプログラム別(Windows)のメモリ、ファイルキャッシュ、カーネル。 | 80% · 96% |
| OOM とスワップ | Linux のみ: OOM キラーによって強制終了されたプロセス、およびアクティブなスワップ。 | OOM 発生時 — 重大 |
| OS キャッシュ内の Firebird | Linux のみ、カーネル 6.5 以降: 各データベースファイルのうち OS キャッシュにある量、およびファイルが O_DIRECT で開かれているかどうか。 | — |
| Firebird のメモリと MON$ | Firebird プロセスのメモリと、Firebird 自身が MON$MEMORY_USAGE でカウントする値の比較。 | — |
| ファイルシステム | 1日1回: Firebird、データベース、エージェントのフォルダーのファイルシステム種別とクラスターサイズ。 | パス付きの検出結果 |
TasksMax · NPROC · NOFILE · threads-max
OSの制限: 障害の前兆
「負荷がかかると Firebird がクラッシュする」というのは、多くの場合、OSの制限に達したという意味です。Firebird がスレッドやプロセスを作成できず、新しい接続が失敗し、firebird.log に pthread_create failed が記録されます。
Linux では、エージェントが各 Firebird サーバーを1分ごとにOSの制限と比較します。制限の80%で警告、95%で重大、10分間のピークで判定します。検出結果は2回連続のスナップショット後に表示されます。制限によってすでにプロセスの作成が拒否された場合は、待たずに即座に重大となります。
エージェントは読み取りのみを行います。制限を変更せず、root も不要で、systemctl も呼び出しません。検出結果のヒントには、管理者向けのすぐに使えるコマンドが示されます。
サンプルケース: TasksMax = 4915、接続あたり 3 スレッド。Classic は接続ごとにプロセスを起動するため、最初に TasksMax に達します。
| 制限 | 設定場所 | 上限に達したときに起こること |
|---|---|---|
| Firebird サービスのタスク | サービスまたは親スライスの TasksMax | Classic が新しい接続を受け入れられない |
| Firebird ユーザーのタスク | LimitNPROC、limits.d | スレッドの作成が拒否される |
| ホスト全体のタスク | kernel.threads-max、pid_max | すべてのプログラムで拒否される。threads-max は起動時に RAM から計算される |
| オープンファイル | LimitNOFILE | SuperServer と SuperClassic が最初にこの制限に達する |
| メモリ | サービスのメモリ制限、RAM | OOM キラーがプロセスを強制終了する |
- どのレベルの制限かサービスまたは親スライス(例: system.slice)。
- エージェント自身の割り当てエージェントのタスクと、その子プロセスである gbak および fbsvcmgr は別々にカウントされます。
- Classic の場合接続あたりのスレッド数と、制限があと何接続分を許容するか。
- 検出なし、分析用ディスク待ちのタスクと、ハイパーバイザーが消費した CPU 時間(steal)。
容量 · 一時ファイル · IO · レイテンシ
ディスク
エージェントは各ディスクの役割を把握しています。データベース、Firebird の一時ファイル、またはインストールフォルダを保持しているかどうかです。これらのディスクについて、空き容量、枯渇予測、読み取り・書き込みレイテンシ、IOPS、およびディスクに負荷をかけているものを集計します。
- 空き容量5 GB 未満で警告、1 GB 未満で重大。各フォルダについて、どのディスク上にあるかがわかります。
- 使用率警告: ディスクが 90 % 使用済みで、空きが 20 GiB 未満。重大: 97 % で空きが 5 GiB 未満。両方の条件が必要なため、余裕のある大容量ディスクで誤報が出ることはありません。
- ディスクの急速な枯渇現在の速度でディスクが 6 時間未満で満杯になる場合は警告、2 時間未満の場合は重大。通常の夜間バックアップではアラームは発生しません。検出結果には、過去 10 分間にディスクへ書き込んだものが示されます。
- Firebird の一時ファイル種類別(sort、blob、undo、lock)の数とサイズ。10 GB から警告、50 GB から重大。一時ファイルとデータベースが同じディスク上にあるかがわかります。
- パフォーマンステスト週に一度、夜間に実施: 一時データベースで 100 万件のレコードの INSERT、UPDATE、DELETE。異なる週の結果を比較できます。
- レイテンシと IOPSデータベースと一時ファイルのあるディスクについて毎分計測。読み取り: 20 ms から警告、50 ms から重大。書き込み: 10 ms から警告、30 ms から重大。10 IOPS 以上で 10 分間の平均。一時ファイルのみのディスク — 警告を超えません。
- ディスク満杯: firebird.log のエントリ
firebird.logの「no space」エラーは即座に重大となり、24 時間継続します。検出結果には、空き容量が最も少ないディスクが示されます。 - Windows でのディスク名ディスクはボリューム GUID ではなく、ドライブ文字とボリュームラベルで命名されます(例:
b: (DATA, Disk 2, database))。
Firebird がディスクの読み取りまたは書き込みの 20% 未満しか行っていない場合、別のプログラムがディスクに負荷をかけています。その場合、検出結果のヒントにはディスク上の主な「隣人」と Firebird の割合が示されます。エージェントはヒントのテキストを英語で記述します。
ディスクに負荷をかけているもの
Linux では systemd サービス別、Windows ではプロセス別です。Firebird の行が強調表示されます。Firebird の読み取りと書き込みが少ないのにディスクがビジーな場合、原因は隣接するプログラム(アンチウイルス、外部のバックアップ、別のサービス)です。Windows では書き込みがシステムキャッシュを経由するため、そこでは Firebird の割合は読み取りのみでカウントされます。
Header · LWM · MON$ · gstat
データベース
サーバー上の各データベースには専用のページがあります。サイズ、状態、スイープ、ページサイズ、ダイアレクト、所有者、独自のセキュリティデータベースを持っているかどうか。分単位の4つのチャート: 接続とクエリ、トランザクション、ページの読み取りと書き込み、クエリの準備と実行。
エージェントは状態をMON$DATABASEまたはファイルヘッダーのうち新しい方から取得します。シャットダウン、読み取り専用、レプリカ、nbackupロック。ヘッダーは接続なしで読み取ることができます。そのため、シャットダウン中のデータベースも、接続がなくても表示されます。チャート内の分をクリックすると、トレースからの重いクエリとその分のすべての接続が開きます。
トランザクション: 遅くなる前のシグナル
Next − OATは、1つのトランザクションが長時間開いたままになると増加します。レコードバージョンが蓄積され、データベースが遅くなり始めます。ギャップが400万で警告、800万で重大です。長時間トランザクションは接続テーブルで簡単に見つかります。OST − OITは、ガベージコレクションが追いつかない場合、たとえばスイープが必要な場合に増加します。
- MON$メトリクスアクティブなデータベースについて1時間に1回: レコード操作、プログラム別のメモリ、最も負荷の高い接続。
- クライアントバージョン1日に1回: どのクライアントライブラリが接続し、それぞれがいくつの接続を持っているか。
- 分析付きgstatテーブルとインデックスに関する重大な検出事項と警告の数。
- 増加予測最も急速に増加しているテーブルまたはインデックスの「N日で+25%」。30日以下の場合は赤。
server_status
サーバーヘルスレポート
行はサーバーシステム、列は時間です。24時間の場合はセルが1時間、7日間の場合は4時間、14日間の場合は6時間です。セルにはその時間の最悪レベルが表示されます。赤は重大、オレンジは警告、緑はOKです。セルをクリックすると、その時点のスナップショットが開きます。
新規、悪化、解消
履歴パネルには、検出事項がいつ現れ、より深刻になり、解消したかが表示されます。ログ内の一時的なエラーはすぐに表示され、1時間保持され、テキストにエントリの時刻が含まれます。
問題がどれだけ続いたか
各レベルの時間と問題の表: 開始、終了、期間、システム。「まだアクティブ」はすぐに表示されます。
原因、ヒント、ボタン
検出事項のテキストにはオブジェクト名が含まれます: ディスク、フォルダー、データベース、ユーザー、プログラム、クライアントバージョン、クエリ。各ヒントにはアクションが示されます。その隣にボタンがあります: バックアップタスクを追加、バックアップ検索フォルダーを設定、タスクまたは設定を開く。
- 18のシステムサーバー、CPU、メモリ、OS制限、ディスク、ディスク速度、firebird.log、トレースエラー、トランザクションとGC、ロック、クエリ、接続、インデックス、バックアップ、fbagentジョブ、レプリケーション、fbagentエージェント、セキュリティとライセンス。他の検出事項がある場合は「その他の検出事項」行が表示されます。
- チャート上のしきい値CPU、メモリ、ディスク速度については、警告ラインと重大ラインが表示されます。
- パネル内のテーブルディスク: ボリュームと一時フォルダー。トランザクション: OIT/OATギャップのあるデータベースと、ユーザーおよびプロセスを含む長時間トランザクション。レプリケーション: ラグのあるマスターとレプリカ。エージェント: その健全性、ファイルキュー、主要ジョブ。
- 検出事項のグループに対する1つのカード同じ種類で同じレベルの検出事項が3つ以上ある場合、1つのカードとして表示されます。値はしきい値の隣に表示されます: 「476.5 MiB / 1 GiB」。
- エラー、クエリ、バックアップ頻繁なトレースエラー、Perf Reportへのリンク付きの最も遅いクエリ、バックアップ検出事項の表。
- データソース各ソースについて: 状態とデータの経過時間。状態は英語で、たとえばstaleやmissingです。staleまたはmissingのソースは強調表示されます。沈黙しているエージェントは「すべて問題なし」のようには見えません。
- 誤報を発生させないものエージェントの処理キューが警告以上になることはありません。Firebird が停止していても、エージェント自体の状態が深刻になることはありません。これは別個の検出事項です。
- ダッシュボードの見出し「サーバーステータス」アイコンの隣に 1 行表示されます。主要な検出事項と、検出事項のあるシステムです。クリックするとこのレポートが開きます。